AGENTS.md / Помогает ли файл контекста агенту? — Research Insights Made Simple

После добавления AGENTS.md агент чаще запускает тесты и читает больше файлов. Но помогает ли это ему решить больше задач?

В новом выпуске Research Insights Made Simple, что выйдет сегодня в прямом эфире в 13:15 я разбираю исследование "Evaluating AGENTS.md". На SWE-bench и CTXbench авторы проверили, как файл инструкций влияет на долю решённых задач и стоимость работы агента. Сгенерированные файлы повысили среднюю стоимость прогона на 20–23 %, а статистически значимого прироста доли решённых задач авторы не обнаружили. Кстати, я уже разбирал этот paper письменно раньше.

А сегодня мы обсудим • Чем отличается работа агента без файла, с инструкциями команды и с файлом, сгенерированным моделью. • Почему обзор репозитория в этих экспериментах не помогал быстрее найти нужный файл. • Какие правила проекта стоит передать агенту и как проверить их пользу на своих задачах.

Что в вашем AGENTS.md реально меняет поведение агента? Поделитесь примером в комментариях.

#AI #Agents #Architecture #Data #Evals