Эффект AI: 90% на шаге — 5% на цикле

Авенир Воронов, директор по внедрению в Veai, объясняет, как опыт CTO и эксперименты с AI в разработке превратились в продукт и практику внедрения. Руководству недостаточно показать новый агент — нужно доказать бизнес-эффект и связать его с реальной работой инженеров.

Команда строит пирамиду метрик: наверху P&L и цели руководства, посередине скорость потока, внизу сигналы вроде DORA и тестов. Сэкономленное время оценивают контрфактически — сравнивают работу агента с человеческой оценкой и сохраняют возможность провалиться до конкретной задачи.

Телеметрия охватывает код, исследование проекта, документацию и вопросы к системе. Внедрение проходит ступени доверия: сначала люди избегают продакшена, затем расширяют сценарии. Acceptance rate и размер diff поэтому дополняют переработкой, качеством, релизами и обратной связью, а не превращают в один KPI.

У любой метрики должно быть ясное «зачем»: число подсказок не доказывает пользу и может скрывать потерю навыка постановки задач. Зрелые команды сдвигают AI к интенту и бизнес-гипотезам, затем охватывают Operations. Успех определяет цель заказчика и подтверждённое изменение бизнеса, а не универсальный процент ускорения.