Tencent объявила о бета-тесте функции управления настольными программами в ИИ-агенте WorkBuddy

Изображение: OpenAI
20 ноября Tencent объявила об открытом бета-тесте функции управления компьютером в офисном ИИ-агенте WorkBuddy. Агент сможет работать с настольными программами, даже если у них нет ни веб-версии, ни API, ни коннектора.
Как пишет Pandaily, агент распознаёт элементы интерфейса и может сам нажимать кнопки и вводить текст. Функция рассчитана на задачи, для которых иначе пришлось бы вручную переносить данные между программами.
В одном из примеров Tencent агент по данным о поступлении товара сверяет складские записи со сведениями об активах в разных программах. В другом он ищет записи в системе управления учебным заведением.
Бета-версия работает в Windows и macOS с клиентом WorkBuddy 5.11.0 или новее. Tencent предупреждает, что распознавание интерфейса зависит от приложения: если программа открывается на рабочем столе, это ещё не значит, что агент сможет с ней работать.
За работой агента можно следить в отдельном окне. Если в приложении, которым управляет агент, переключить фокус ввода или изменить состояние страницы, выполнение задачи может прерваться.
Tencent советует следить за действиями агента во время критичных операций, например при оплате или удалении записей, а после выполнения задачи проверять результат в исходной системе.



