Как превратить "внедряйте ИИ" в измеримую задачу?
Почти год назад Цукерберг ввёл в своей компании метрику "AI-driven impact". Ввёл и обещал сделать её "основополагающей". Она мерит "использование ИИ" и "результат", но сразу одним числом. И для метрики это так себе история, вот почему:
Есть такая штука - закон Гудхарта: как только метрика становится самоцелью, она перестаёт быть хорошей метрикой. Вот такая "склеенная" метрика - идеальный пример. Если сложно доказать результат - можно просто вытащить один из компонентов как козырь. Ничего не выкатил и не ускорил? Ну, зато я активно юзаю ИИ (охват пожирает результат). Результат хороший, но ИИ никуда не внедрён? Ну ок, просто приписываем его нейросетке в отчёте. В итоге перформанс ревью у нас идеальный, а реальное внедрение ИИ не продвинулось.
Сегодня свой подход показал Яндекс, и он, как по мне, куда интереснее. Их программа называется "75/75/75":
- К концу 2026 года 75% разработчиков должны регулярно применять ИИ (= охват).
- При этом, 75% изменений в коде делаться с его участием (= глубина встройки)
- Внутри таких изменений не менее 75% кода генерирует именно ИИ (= реальный результат).
Здесь цифры не склеены, как у Цука, а "вложены" одна в другую и идут по нарастающей, как ёлочка. Разок потыкали в помощника - не засчитается за "75% изменений".
Поясню, почему выбрали такую конфигурацию (на мой личный взгляд). У Яндекса >70% разрабов уже регулярно используют эйай. А глубоко встроенных команд (те самые 75% изменений) - да, стало сильно больше за последний квартал, но пока ещё менее 20%. Получается, вопрос охвата почти решён, его надо совсем немного нарастить и поддерживать, а вот следующая главная задача - обеспечить глубину. И при этом чтобы всё вместе давало ощутимый результат на выходе. Думаю, именно поэтому "75" берут три раза.
Важный момент. Яндекс не просто вешает цифру на стену со словами "соответствуйте", а даёт инструментарий. У них есть внутренний агент GENA, который сам доводит задачи от тикета до кода и подключён к 1 тыс+ проектов. Есть Стефания - виртуальный сотрудник, который готовит аналитику и ревьюит код. Вообще, дать инструмент - это ключевое условие, чтобы любое изменение не оставалось на бумаге.
С помощью ИИ-кодинга начали ускорять выход многих продуктов и фич. К примеру, в Яндекс Еде агентный кодинг помог ускорить выход ИИ-хостес в продакшн в 2 раза, в Лавке скорость спринтов выросла в 3 раза.
Что думаете о таком подходе?
Дизраптор