Microsoft выпустила Scope для тестирования ИИ-агентов, пишущих код

Microsoft представила Scope — платформу с открытым исходным кодом для оценки того, насколько программное обеспечение подготовлено к работе с ИИ-агентами, которые пишут код.

Инструмент построен на базе Kubernetes и позволяет проверять работу агентов на реальных задачах. Scope отслеживает, как агент взаимодействует с продуктом, выполняет инструкции и реагирует на обратную связь.

Что проверяет Scope

Платформа анализирует рабочий процесс по трём основным направлениям:

• Документация и инструкции. Scope ищет повторяющиеся ошибки, неточности и неверные предположения в руководствах, предназначенных для ИИ-агентов.
• Обнаружение и использование SDK. Инструмент проверяет, правильно ли агент выбирает API и выполняет инициализацию компонентов.
• Командная строка и MCP-серверы. Платформа оценивает взаимодействие агента с терминалом и серверами Model Context Protocol.

Scope фиксирует действия агента в режиме реального времени, сохраняет историю взаимодействий и создаёт снимки рабочей среды. Это позволяет возвращаться к отдельным этапам выполнения задачи и анализировать причины ошибок.

Платформа поддерживает GitHub Copilot, Claude Code и Visual Studio Code с Copilot. Microsoft распространяет Scope по лицензии MIT, которая разрешает свободно использовать и расширять проект.

Отдельно Microsoft подчёркивает возможность самостоятельного развёртывания инструмента. Благодаря этому команды могут анализировать рабочие процессы ИИ-агентов внутри собственной инфраструктуры, не раскрывая исходный код и данные о выполнении задач внешним сервисам.