Новый Copilot Vision от Microsoft умеет «видеть» приложения в Windows.

Сегодня Microsoft запускает Copilot Vision для Windows, расширение своего AI-ассистента, которое позволяет делиться экраном или приложениями, чтобы Copilot мог, например, обучать вас работе с функциями Adobe Photoshop или анализировать просматриваемые фотографии и веб-страницы. Команда Copilot отмечает: «После включения Copilot Vision может видеть то, что видите вы, и обсуждать это с вами в режиме реального времени». Он выступает в роли ваших «вторых глаз», способных анализировать контент, помогать, когда вы потерялись, предоставлять информацию и отвечать на ваши вопросы по ходу работы.

Microsoft начала тестирование Copilot Vision в Windows ранее в этом году, и теперь запускает его в США для пользователей Windows 10 и Windows 11. Для доступа к этой функции потребуется подписка на Copilot Pro стоимостью 20 долларов в месяц, поскольку она по-прежнему является частью экспериментальных AI-инициатив Microsoft Copilot Labs.

Copilot Vision для Windows работает в приложении Copilot и может быть активирован с помощью иконки в виде очков, позволяющей выбрать окно браузера или приложение, которым вы хотите поделиться с AI – аналогично демонстрации экрана или приложений на встрече в Microsoft Teams. Это опция, которую нужно включить – вам придется специально делиться приложениями, чтобы Copilot Vision работал; это не похоже на Recall, который постоянно делает снимки экрана после включения.

Полностью протестировать Copilot Vision для Windows пока не удалось, так как Microsoft ограничивает доступ к ней только США, но возможность ознакомиться с ней вкратце была предоставлена на мероприятии, посвященном 50-летию Microsoft в апреле. После того как вы поделитесь приложением, Copilot сможет выделять части вашего экрана, чтобы направлять вас и помогать отвечать на вопросы. Также Copilot Vision доступен на iOS и Android.