Работаем более 3-х лет
Компания Microsoft начала тестирование обновления для своего ИИ-помощника Copilot, которое позволяет ему «видеть» содержимое экрана и приложений в Windows. Новая функция Copilot Vision, ранее доступная только в браузере Edge, теперь распространяется на все программы. С её помощью пользователи могут получать подсказки в реальном времени, например инструкции по использованию сложных инструментов или анализ фотографий и веб-страниц.
На демонстрации в рамках 50-летия Microsoft показали, как Copilot Vision помогает в игре Minecraft и даёт совет по оптимизации настроек в видеоредакторе Clipchamp. Помощник выделяет элементы на экране, упрощая взаимодействие с интерфейсами приложений. В отличие от функции Recall, которая лишь автоматически сохраняет снимки экрана, Copilot Vision работает как «живая демонстрация» в режиме реального времени.
Пока бета-версия доступна только в США, а часть функций, включая выделение элементов экрана, временно отключена. Параллельно Microsoft тестирует улучшенный поиск файлов через Copilot: помощник может находить документы по их содержимому, поддерживая форматы DOCX, PDF, JSON и другие. Для работы этих функций достаточно стандартного приложения Copilot в Windows.
Copilot Vision также будет доступен на iOS и Android. Сейчас нововведения тестируются среди участников программы Windows Insiders, а полноценный релиз для всех пользователей Windows 11 ожидается в ближайшие недели или месяцы.
