Microsoft разрешает Copilot Studio использовать компьютер самостоятельно.

На этой неделе Microsoft активировала новую функцию "использование компьютера" для Copilot Studio, позволяющую ИИ-агентам взаимодействовать с веб-сайтами и настольными приложениями. Подобно функции "computer use" от OpenAI Operator или Claude, компании смогут использовать Copilot Studio для создания ИИ-агентов, которые воспринимают веб-сайты и настольные приложения как инструменты для автоматизации задач.

“Функция 'использование компьютера' позволяет агентам взаимодействовать с веб-сайтами и настольными приложениями, нажимая кнопки, выбирая пункты меню и вводя данные в поля на экране”, – объясняет Чарльз Ламанна (Charles Lamanna), корпоративный вице-президент Microsoft по бизнес- и отраслевому направлению Copilot. “Это позволяет агентам выполнять задачи, даже если нет API для прямого подключения к системе. Если человек может использовать приложение, то и агент тоже сможет”.

Copilot Studio сможет создавать ИИ-агентов, которые автоматизируют ввод данных, проводят маркетинговые исследования или даже обрабатывают счета. Microsoft утверждает, что новый инструмент способен обнаруживать изменения кнопок и экранов в приложениях или на веб-сайтах и продолжать работу без сбоев.

Ранее в этом месяце Microsoft добавила аналогичную функцию, названную Actions, в потребительский Copilot. Actions могут выполняться в фоновом режиме во время работы над другими задачами. Теперь Copilot может, например, бронировать столики в ресторанах, покупать билеты на мероприятия и приобретать товары в интернет-магазинах. Однако возможности Actions ограничены рядом партнеров, а Copilot Studio, по всей видимости, сможет работать с большим количеством веб-сайтов и приложений.