Меньше счётчиков, больше дела: создатель Claude Code предложил новый способ оценивать эффективность ИИ
Разработчик кодингового инструмента Anthropic Борис Черный затронул одну из самых больных тем современного бизнеса — как реально оценивать окупаемость затрат на искусственный интеллект. По его мнению, стандартные корпоративные отчёты измеряют совершенно не то.
Разработчик кодингового инструмента Anthropic Борис Черный затронул одну из самых больных тем современного бизнеса — как реально оценивать окупаемость затрат на искусственный интеллект. По его мнению, стандартные корпоративные отчёты измеряют совершенно не то.
Сейчас большинство компаний оценивают эффективность ИИ по объёмам потребления токенов и смотрят на красивые графики активности сотрудников на дашбордах. Черный уверен, что эти цифры показывают лишь суету, а не реальную отдачу от инвестиций. Вместо этого он предлагает руководителям задавать себе один простой вопрос: «Стали бы мы тратить ресурсы инженеров на эту задачу вручную?»
«Если да, то сколько времени это заняло бы и во сколько бы обошлось в человеко-часах ручной работы разработчиков? Вот это и есть ваша настоящая окупаемость», — отметил создатель Claude Code.
Once your teams are bought in, how do you track it? Usage is worth watching (e.g. a dashboard), but it measures activity, not return. A better question: would you have spent engineering effort on this anyway? If yes, how much and what would it have cost in manual eng-hours?..
Он считает, что главный прорыв происходит тогда, когда рутинное исправление багов и поддержка кода незаметно уходят на задний план и полностью закрывает ИИ. В этот момент команды разработчиков могут наконец-то сфокусироваться на созидании и начать создавать продукты, которые раньше для компании были просто недосягаемы.
Эта дискуссия разворачивается на фоне того, как первая волна слепого увлечения нейросетями поутихла. Бизнес столкнулся с суровой реальностью: расходы на технологии стремительно растут, а их ценность не всегда очевидна. И пока одни техногиганты ищут способы сократить бюджеты — например, переходя на более дешёвые китайские модели, эксперты призывают оценивать ИИ не по затраченной компьютерной мощности, а по времени, которое он сэкономил живым людям.
Релоцировались? Теперь вы можете комментировать без верификации аккаунта.