«Я сам это нажму». Microsoft тестирует ИИ-агентов, которые могут самостоятельно «кликать» и прокручивать ваш рабочий стол

Microsoft запустила тестирование новой функции Copilot Actions в Windows 11. Экспериментальный режим доступен участникам программы Windows Insider в Copilot Labs и позволяет искусственному интеллекту выполнять действия с локальными файлами и приложениями.

Copilot Actions развивает веб-функцию Copilot Actions, представленную в мае. Тогда Copilot мог бронировать столики, заказывать продукты и выполнять другие задачи через браузер. Теперь система работает напрямую в Windows — открывает и редактирует документы, управляет программами и выполняет повторяющиеся действия по запросу пользователя.

В блоге Microsoft объясняется, что Copilot Actions основан на архитектуре агентных систем, описанной в проекте AI Agents for Beginners. Такие агенты взаимодействуют с системой как человек — нажимают, печатают и прокручивают, используя зрение и логику.

Компания отмечает, что вместе с новыми возможностями появляются риски безопасности. Среди них — cross-prompt injection (XPIA), когда вредоносный контент в документе или интерфейсе может изменить поведение агента и привести к утечке данных или установке вредоносного ПО.

Чтобы минимизировать эти риски, Microsoft внедрила изолированную среду agent workspace. В ней Copilot действует независимо от пользователя: работает под отдельной учётной записью, имеет ограниченные права и собственный виртуальный рабочий стол. Все действия фиксируются, а разрешения можно отозвать в любой момент.

Функция отключена по умолчанию и активируется вручную в разделе Settings → System → AI components → Agent tools → Experimental agentic features. В тестовом режиме Copilot получает доступ только к стандартным папкам — Documents, Downloads, Desktop и Pictures. Для других данных требуется подтверждение пользователя.

Microsoft подчёркивает, что агенты должны быть подписаны доверенными издателями и работать в соответствии с Responsible AI Standard и Microsoft Privacy Statement. Развитие Copilot Actions связано с инициативой Secure Future Initiative, направленной на повышение защиты Windows в эпоху агентных систем.

Более подробная презентация функции ожидается на конференции Microsoft Ignite 2025 в ноябре.