Microsoft випустила оновлення для ШІ-помічника Copilot з новою функцією Copilot Vision для Windows 11. Тепер штучний інтелект зможе бачити все на робочому столі, отримуючи доступ до будь-яких ваших дій і даних. Раніше ШІ міг спостерігати та пов’язувати між собою дані тільки з двох застосунків. Нова функція поки проходить попереднє тестування і доступна тільки учасникам програми Windows Insiders.
Раніше Microsoft вже представила функцію Recall, яка періодично робить скриншоти екрана, щоб допомагати користувачеві орієнтуватися в хронології своїх дій і знаходити будь-який контент. Copilot Vision більше схожий на трансляцію екрана під час відеодзвінка. Користувач активує нову функцію, натиснувши на відповідний значок у Copilot і обравши робочий стіл. Після цього ШІ бачитиме й аналізуватиме всі ваші дії, надаючи цінну інформацію, наприклад, може давати інструкції за вашим запитом. Так ШІ може допомогти з виконанням складних завдань — від освоєння якоїсь гри до заповнення документів.
Microsoft почала тестувати Copilot Vision ще минулого року у вигляді функції, яка спостерігала за активністю користувача в браузері Edge. Також Copilot Vision зможе аналізувати дані з камери мобільного телефону і відповідати на запитання користувача.
Джерело:
The Verge