ИИ и разработка
Google открыла Computer Use в Gemini API для общего доступа
Публикация:
С 30 октября разработчики могут использовать инструмент Computer Use в Gemini API в общем доступе через Interactions и GenerateContent. Модель предлагает действия для интерфейса, но выполнять их должно клиентское приложение разработчика.
30 октября 2026 года Google перевела Computer Use в статус общей доступности в Gemini API. Инструмент доступен через Interactions API и GenerateContent API; прежде он распространялся в предварительных версиях.
Computer Use позволяет модели анализировать снимок экрана и возвращать структурированное действие — например, щелчок, ввод текста или прокрутку. Затем приложение разработчика само выполняет разрешённое действие, получает новое состояние интерфейса и передаёт его модели. Поэтому API не управляет компьютером напрямую: для рабочего агента нужны собственный обработчик команд и среда выполнения.
Документация Google перечисляет браузерную, мобильную и настольную среды и поддерживаемые модели Gemini. Компания отдельно предупреждает, что автоматизация может ошибаться и содержать уязвимости: действия нужно контролировать, а задачи с чувствительными данными и серьёзными необратимыми последствиями не следует оставлять без надзора.
Для разработчиков это означает, что Computer Use теперь можно закладывать в общедоступные интеграции, но безопасное исполнение остаётся их ответственностью. Ранее Google добавила командный клиент Gemini API для скриптов и CI; при проектировании новых интеграций также стоит проверить настройки хранения запросов Gemini API.