Windows готовится к крупнейшему интеллектуальному обновлению благодаря Copilot

Microsoft расширяет возможности Copilot Vision. Скоро он сможет просматривать и взаимодействовать с Windows в целом и приложениями. Вы даже сможете использовать его для изучения навыков в Photoshop.

Это знаменательный день для Microsoft – компании, которая отмечает 50-летие и делает Copilot на новый уровень. Помощник AI от Microsoft, Copilot, становится более персонализированным и получает множество новых функций. Однако расширение Copilot Vision заслуживает особого внимания, поскольку оно обеспечит один из наиболее значительных интеллектуальных толчков для Windows.

Мы уже видели, что Copilot может просматривать веб-страницы вместе с вами, делиться тем, что вы видите, с избранными партнерами и оказывать помощь. Благодаря новому приложению Copilot for Windows, вы сможете позволить ИИ просматривать ваш экран в базовой операционной системе и в избранных приложениях. Как и в случае с Интернетом, он сочетает в себе мультимодальный ИИ с агентическими возможностями, а благодаря способности просматривать и понимать ваш экран, он также сможет взаимодействовать с приложениями.

Помощь на экране

Это выражается в выделении опций на вашем экране и даже добавлении дополнительного курсора, а также в озвучивании необходимых шагов. Это довольно круто. В одной демонстрации мы видели, как Copilot давал инструкции по редактированию в Photoshop, по сути, руководя вас по использованию инструмента.

Это может стать настоящим прорывом, поскольку Copilot не просто помощник для быстрого получения фактов; вы можете интегрировать его в свой рабочий процесс и использовать так, как вам удобно. Конечно, нам нужно будет увидеть, насколько хорошо он выполняет свою работу, но добавление Vision для Windows наряду с более персонализированным Copilot является большим шагом вперед.

Он будет доступен по желанию при запуске, и Microsoft придерживается осторожного подхода. Vision в приложении Copilot for Windows начнет внедряться для участников программы Windows Insider на следующей неделе, а Microsoft говорит, что он станет «более широко доступным позже». Это не очень конкретно, поэтому может пройти некоторое время, прежде чем вы сможете попробовать его, если вы не являетесь участником программы Windows Insider.

Для Android и iOS

В дополнение к возможностям "Глубокого исследования" и новой функции "Покупки" для Copilot его возможности Vision расширяются и на ваш телефон Android или iOS. Через приложение Copilot вы сможете запустить камеру и, по сути, позволить ИИ использовать этот вид для этих устройств. Это означает, что вы можете направить ее на собаку и спросить о породе, или даже на магазин и спросить о его отзывах. Вы также можете загружать фотографии из галереи вашего телефона.

Эти расширенные возможности Vision для Copilot на мобильных устройствах доступны прямо сейчас, просто убедитесь, что вы обновили приложение. Это изменение на мобильных устройствах также ставит Copilot наравне с возможностями Google Astra для Android. Изменения в Windows представляют собой большой скачок в интеллекте, который может изменить способ использования вами приложений в операционной системе.

Не могу дождаться, когда попробую Vision с сложной задачей, которую я пытаюсь решить в Photoshop, или когда мне нужно создать сложную формулу в Excel. Все эти изменения, однако, показывают амбиции Microsoft в области ИИ, особенно стремление заставить больше людей использовать Copilot.

Ни одно из этих изменений не является категорическим или совершенно новым, но они, безусловно, делают Copilot гораздо более конкурентоспособным по сравнению с ChatGPT – ведь у него есть мозги, так зачем же не добавить больше функций?