Microsoft Copilot следит за вашим экраном, и я не против – при условии, что это останется в частном порядке.

Microsoft выполнила по крайней мере одну часть моего списка желаний на мероприятии Copilot, объявив, что Copilot Vision будет встроен в Windows 11 и мобильное приложение.

Copilot Vision позволит ИИ фактически видеть то, что отображается на вашем экране, и мир вокруг вас. Microsoft впервые экспериментировала с этой идеей в Edge, где Copilot мог заглядывать в браузер и предлагать помощь.

Но теперь он будет работать системно, во всех приложениях, веб-сайтах и даже том, что показывает камера вашего смартфона на экране. Идея состоит в том, чтобы предложить проактивного помощника ИИ, который может сканировать таблицу Excel, суммировать PDF-файл, предлагать способы настройки или определять дикую ягоду, которую вы не уверены, съедобна она или ядовита.

Преимущество очевидно, даже если сравнивать его с инструментами с аналогичными функциями, такими как ChatGPT и Gemini. Эти инструменты могут быть хороши на настольном компьютере или ноутбуке, но у них нет преимуществ встроенных непосредственно в операционную систему.

Copilot имеет преимущество на домашней площадке Windows 11. Vision использует это преимущество. Ему не нужно ждать подсказки; он может видеть, что вы делаете, и предлагать контекстно-релевантную помощь.

Microsoft явно предвидит некоторое беспокойство по поводу расширения Copilot Vision, судя по тому, насколько она стремится подчеркнуть аспекты конфиденциальности функции. Microsoft заявляет, что Copilot Vision работает только при предоставлении доступа.

Тем не менее, нельзя отрицать странность в отношении конфиденциальности. Цифровой эквивалент того, как кто-то заглядывает вам через плечо, звучит жутко вне контекста. Конечно, мы все не раз передавали огромные объемы данных в облако, чтобы получить немного лучшие рекомендации по фильмам или подобные преимущества.

Но я понимаю, почему позволять ИИ буквально читать ваш экран, когда вы делаете то же самое, может показаться интимным в каком-то тревожном смысле.

Контроль и доверие могут стать решающими факторами успеха Copilot Vision. Если Microsoft начнет делать Copilot Vision по умолчанию включенным или будет скрывать настройки разрешений где-то в глубоко спрятанном системном меню, больше людей может отказаться от Copilot и перейти к другому варианту с теми же возможностями, но с более полным контролем со стороны пользователя.

Я все равно считаю, что это будет действительно полезное дополнение к Copilot, особенно в удивительно хорошо спроектированном мобильном приложении Copilot. Вам захочется отслеживать предоставленные разрешения и когда Copilot Vision активен.

Я бы поощрил попробовать его, но следите за тем, что делает ИИ, пока он делает то же самое.