Система важнее отдельной модели
Одна и та же модель даёт разное качество в зависимости от упаковки контекста, примитивов действий, границ полномочий и доказательств результата. Поэтому полезная единица анализа шире формулы «модель плюс обвязка». Железо задаёт экономику достижимого поведения, модель — способности и привычки, обвязка — состояние и протокол работы, инструменты — последствия, трейсы — материал для диагностики, а проверки — право выпуска.
Эти слои живут в двух темпах. Описания инструментов, маршрутизацию, сжатие контекста, бюджеты и release gates команда меняет за дни или недели; ускорители, архитектуру serving и обучение модели — за месяцы или годы. Локальный сбой разумно сначала чинить в быстром контуре. Только повторяющийся класс ошибок, подтверждённый множеством эпизодов, стоит поднимать в post-training или инфраструктуру.
Среда действий формирует поведение
Модель учится действовать не вообще, а в знакомом мире названий, ошибок и примитивов. Cursor описывает многонедельную адаптацию обвязки к разным моделям; опыты Anthropic с долгими задачами потребовали состояния между окнами, Git-истории, малых проверяемых итераций и восстановления. По мере усиления модели жёсткая процедура может стать доступным ей инструментом, но обвязка не исчезает: она переносит каркас к следующей слабости.
MCP стандартизует обнаружение и вызов инструментов, но не гарантирует верный выбор, безопасные полномочия или проверяемый эффект. Полный контракт действия включает identity и scope, идемпотентность или явную необратимость, компактный ответ, понятную ошибку, аудит и конечное состояние. Трейс тоже имеет разные режимы: эксплуатационная телеметрия, материал для проверки и разрешённая обучающая траектория требуют разных правил хранения, очистки и использования.
Владеть нужно контуром доказанного изменения
Красивый трейс не доказывает полезный результат, а единичный успех — надёжность. Для каждого реального эпизода нужно сохранять исходное и конечное состояние, контракт задачи, версии модели, обвязки и инструментов, затем воспроизводить его в фиксированной среде. В контролируемом эксперименте меняется один слой, после чего серия прогонов проверяет качество, разброс, стоимость, безопасность и человеческую приёмку до нового допуска.
Передовые модели и типовой агентный цикл обычно выгоднее арендовать; упаковку контекста, интеграцию обвязки и описания инструментов — адаптировать. Своими должны оставаться identity, политики, доменные контракты действий, каталог эпизодов и критерии принятого результата. Исследование публичных репозиториев не подтвердило буквальный шестимесячный «полураспад» обвязки: явно заменились примерно три-четыре механизма из десяти, хотя семь и более существенно перенастраивались. Значит, собственная обвязка требует постоянной программы совместимости и оправдана лишь уникальной средой, ограничениями, масштабом, зрелыми проверками и стратегической ролью агента.
Что стоит унести с собой
- 01Качество AI-разработки определяется всей производственной системой, а не местом модели в рейтинге.
- 02Локальные отказы следует исправлять в быстром контуре; обучение и железо нужны для устойчивых повторяющихся классов проблем.
- 03Ценность инструментального шлюза создают управляемые контракты действий и проверяемые последствия, а не число подключённых MCP-серверов.
- 04Долговечный актив компании — воспроизводимые эпизоды, собственные политики и независимое право допускать изменения к выпуску.
Источники
- Локальная Whisper-расшифровка аудиоверсии выпуска
- Двуязычные слайды и полный авторский разбор
- Запись выпуска на YouTube