Microsoft начала тестировать еще одно обновление приложения Copilot для Windows, которое позволит вам передавать изображение с экрана компьютера и интерфейса приложений, работающих на нем, к помощнику искусственного интеллекта. Видение Copilot изначально было ограничено браузером Edge, но теперь оно расширяется до каждого компьютерного приложения.
Copilot Vision может помочь вам понять, как работает Adobe Photoshop, анализировать фотографии или веб -страницы, которые открывает пользователь. На этом мероприятии, посвященном 50 -летию Microsoft, компания показала, как помощник поможет вам играть в Minecraft и оптимизировать настройки в видео редактора Clipchamp. Только пользователи инсайдеров Windows в Соединенных Штатах в настоящее время могут проверить предварительную версию Copilot Vision.
Копилот может подчеркнуть определенные области экрана, чтобы помочь пользователю ориентироваться в интерфейсе конкретной программы. На практике это отчасти похоже на отзыв, который автоматически делает снимки экрана и позволяет вам искать их, а частично — передача на экран через команды Microsoft. Copilot для Windows также запустил тесты файлового бакера AI, позволяя вам задавать помощники вопросов об их содержании; Поддерживаемые форматы. Обе функции доступны для всех компьютеров Copilot для Windows, а не только для компьютеров Copilot Plus.
Функция Copilot Vision также доступна в приложениях для iOS и Android. На компьютере эта функция в настоящее время тестируется как часть программы Windows Insider, но может стать общедоступным в ближайшие недели или месяцы.