Microsoft выпустила обновление для ИИ-помощника Copilot с новой функцией Copilot Vision для Windows 11. Теперь искусственный интеллект сможет видеть все на рабочем столе, получая доступ к любым вашим действиями и данным. Ранее ИИ мог наблюдать и связывать между собой данные только из двух приложений. Новая функция пока проходит предварительное тестирование и доступна только участникам программы Windows Insiders.
Ранее Microsoft уже представила функцию Recall, которая периодически делает скриншоты экрана, чтобы помогать пользователю ориентироваться в хронологии своих действий и находить любой контент. Copilot Vision больше похож на трансляцию экрана во время видеозвонка. Пользователь активирует новую функцию, нажав на соответствующий значок в Copilot и выбрав рабочий стол. После этого ИИ будет видеть и анализировать все ваши действия, предоставляя ценную информацию, например, может давать инструкции по вашему запросу. Так ИИ может помочь с выполнением сложных задач — от освоения какой-то игры до заполнения документов.
Microsoft начала тестировать Copilot Vision ещё в прошлом году в виде функции, которая наблюдала за активностью пользователя в браузере Edge. Также Copilot Vision сможет анализировать данные с камеры мобильного телефона и отвечать на вопросы пользователя.
Источник:
The Verge