Расходы на ИИ для кода зависят не только от модели

В исследовании двух учёных Шаньдунского университета стоимость выполнения одной задачи по программированию могла различаться до трёх раз при одинаковых модели и расценках. Менялась программная оболочка — инструкции и инструменты, через которые ИИ работает с проектом. Значительную роль в расходах играл объём служебного текста, повторно отправляемого модели на каждом шаге.

При этом на большом наборе задач Claude Code и минималистичный mini-SWE-agent показали близкие результаты; OpenCode отстал. Это не расчёт экономии для любой компании: исследование опирается преимущественно на один набор тестов, а число шагов зависит от сочетания модели и оболочки. Для оценки затрат важен счёт за всю попытку, а не только цена модели или длина инструкции.

Разбор результатов, стоимости попыток и ограничений сравнения: https://ai-digest.ru/go/finbazar/4392/