ROI от AI в разработке: Егор Денисов-Бланш о продуктивности 120 000 разработчиков
Ключевые факты
- 1 Средний прирост продуктивности от AI составляет 10%.
- 2 ROI от AI напрямую зависит от «индекса чистоты окружения» (низкий техдолг).
- 3 Чрезмерное использование AI (свыше 10 млн токенов на инженера) не дает дополнительного эффекта.
- 4 AI увеличивает энтропию и технический долг, требуя контроля качества генерируемого кода.
Исследование, представленное Егором Денисовым-Бланшем (экспертом по инженерной продуктивности, работавшим в Google и Microsoft), охватило более 120 000 разработчиков в 600+ компаниях. Основной вывод — средний прирост продуктивности составляет 10%. Однако этот эффект не универсален и сильно зависит от контекста. Ключевым фактором, определяющим успех внедрения AI, является «индекс чистоты окружения» (качество кода, документация и модульность). Высокий технический долг сводит на нет преимущества AI, поскольку модели тратят много токенов на обработку некачественного контекста. Таким образом, AI может даже увеличить энтропию и технический долг, если инженеры не следят за качеством генерируемого кода. Также Денисов-Бланш предупреждает, что чрезмерное использование AI (свыше 10 млн токенов на инженера) не приводит к дальнейшему росту продуктивности и может даже ухудшить результаты. Для измерения ROI предлагается использовать метрику Engineering Output, которая оценивает сложность решенной задачи, а также метрики Guardrail (Rework & Refactoring, Code Quality).