DX Q3 2026 и цена доверия к коду (Рубрика #AI4SDLC)
В двух выпусках Research Insights Made Simple мы с Евгением Сергеевым разбирали, как ребята из DX предлагают измерять инженерную продуктивность и эффект от AI (вот подкасты про DX Core 4 в общем и про измерение влияния AI). В октябрьском отчёте DX применяет обе рамки. Core 4 показывает скорость поставки, опыт разработчиков, качество и долю времени на новые возможности. AI Measurement Framework добавляет использование AI, его эффект и расходы.
В основе отчёта — телеметрия и опросы из более чем 500 организаций, которые используют платформу DX. С Q4 2025 по Q3 2026 медианный недельный TrueThroughput вырос на 75,5%, с 1,43 до 2,51 взвешенного PR на инженера. За последний квартал разработчики заметно лучше оценили отладку в проде (+13,3%), документацию и сборку с тестированием (по +10,4%). Оценка того, насколько легко доводить изменения до выпуска, выросла на 3%. Доля неудачных изменений и время восстановления после неудачного деплоя остались примерно на прежнем уровне.
Доля рабочего времени на новые возможности по опросам сдвинулась с 57% до 59% за четыре квартала. По телеметрии около 56% наблюдаемых AI-сессий шли на поддержку и исправления, 11% — на новые возможности. Здесь мне нравится, что есть два разных способа посмотреть на работу команды. Опрос показывает, как инженеры распределяют своё время, а сессии — для каких задач они зовут агента. Чтобы понять, куда ушли сэкономленные часы, надо проследить сами задачи от начала до конца.
А теперь к тому, что я пометил на полях.
1️⃣ Из чего сложились +75,5%? TrueThroughput взвешивает влитые PR по сложности при помощи модели. Размер diff в строках — один из сигналов, и медианный PR за этот период вырос на 122%. Тут мне хочется увидеть рядом обычное число мержей на инженера и средний вес PR по одним и тем же компаниям. Пока по графику трудно понять, сколько роста дали дополнительные мержи и сколько — более тяжёлые по оценке DX изменения. На стр. 10 мелькает ещё +47% к delivery volume. Было бы интересно узнать у DX, что именно они там посчитали. Немного про это рассказывал Аби Нода из DX в рассылке, когда говорил о весах этой модели.
2️⃣ Почему первое ревью приходится ждать дольше? В Q3 у компаний с долей AI-кода 20–40% медианное ожидание первого ревью было 40 минут, а в группе с 80% и выше — 82 минуты. Я бы рядом со временем ожидания посмотрел на число PR на ревьюера и время активной проверки одного PR. Если ревьюеры просто заняты другими изменениями, можно перераспределить нагрузку. Если им приходится подолгу восстанавливать контекст каждого изменения, это уже вопрос к тому, что приходит на ревью.
3️⃣ Расходы на AI на разработчика выросли примерно в 21 раз за один год Я обвёл обе точки на графике, $63 в Q4 2025 и $1 314 в Q3 2026. Ещё 94% токенов в последнем квартале пришлись на чтение из кеша. Чтобы понять, сколько денег уходит на повторное чтение контекста, нужна разбивка биллинга по типам токенов. Дальше хочется посчитать, во сколько обходится одна задача, прошедшая ревью и тесты, и как эта цена меняется по мере роста расходов. Это продолжение моего поста про token burn.
4️⃣ Цена доверия к изменению DX предполагает, что часть работы ревьюера уходит на восстановление того, чего не было в контексте агента. Зачем вообще нужна эта правка? Какие ограничения действуют? Как поймём, что задача решена? Авторы предлагают оценивать контекст через фреймворк CAFE(S), и в Q3 это пока гипотеза о причинах задержек. Мне было бы интересно проверить её на похожих задачах. Если заранее записать архитектурные ограничения и критерии приёмки, сколько человеческого времени удастся сэкономить от открытия PR до мержа, включая переделки?
#AI #AI4SDLC #Engineering #Metrics #Research
Файлы к публикации
- Annotated_DX_2026_Q3_Report_State_of_AI_Impact_in_Engineering.pdfСкачать PDF