Harness: прошлое, настоящее и будущее
Слой между моделью и миром: что упростить после новой модели, а что укрепить
Содержание слайдов
1. Harness: прошлое, настоящее и будущее
Слой между моделью и миром: что упростить после новой модели, а что укрепить
2. Шесть шагов разбора обвязки
3. Words & walls
4. Обвязка — всё, кроме весов
5. 01. Как появилась обвязка
От цикла в промпте к циклу как сервису
6. Пять эпох за четыре года
7. Слово «harness» пришло последним
8. Три односторонние миграции
9. 02. Из чего она состоит
Поверхность сошлась, различия — в дефолтах
10. Словарь примитивов уже общий
11. Протоколы разделились по осям
12. Граница API — ваше состояние
13. Четыре обвязки делят рынок
14. Опасный шаг тормозят по-разному
15. Где живёт цикл и чья модель
16. 03. Комбайн, агент, кубик
Три способа смотреть на один слой
17. Три взгляда на одну обвязку
18. Комбайн — точка схождения рынка
19. Моя гипотеза: чистый агент — ниша
20. Кубик — лестница из трёх ступеней
21. Сто строк bash насытили SWE-bench
22. 04. Права не доверить модели
Даже самой сильной: почему walls — это код
23. Авторизацию не делегируют модели
24. 0,5 % за попытку — это много
25. Дыры закрывает код, а не промпт
26. Классификатор — внутри walls
27. 05. Как доказать пользу
Пункты, повторяемость и цена принятого результата
28. Эффект обвязки двухрежимный
29. Сжимаются words, остаётся среда
30. Одного pass@1 недостаточно
31. Одна ветка — один компонент
32. Реестр: предположение и триггер
33. Токен дешевеет, работа дорожает
34. Цену двигают контекст и кэш
35. Выпуск, время и понимание кода
36. 06. Что будет дальше
Агент со своей машиной и проверка у вендора
37. Агенту дают собственную машину
38. Проверку действий забирает вендор
39. Три проверяемые ставки
40. Что сделать после доклада
Завести реестр предположений обвязки
Перепроверять и удалять компенсирующие инструкции
Walls — кодом, классификатор — внутри
Мерить повторяемость и цену успеха
Доказывать компонент абляцией
Обвязку нужно уметь упрощать
41. Спасибо!
AI4SDLC
Слайды, лонгрид об обвязке и источники — на polomodov.tech; новости AI4SDLC — в Telegram-канале
Александр Поломодов, CTO & Technical Fellow, polomodov.tech
@ai4sdlc