Закончил эксперимент с ClaudeCut.
Закончил эксперимент с ClaudeCut.
Хотел понять, сколько моей подписки Claude за $20 реально уходит на работу, а сколько съедает сам Claude Code.
Я оставил один инструмент для работы через терминал, системный промпт на 36 токенов и ограничил размер контекста. На старте получилось 895 токенов против 17.6k у обычного Claude Code.
Потом прогнал оба варианта на одном и том же репозитории. Одна задача была на понимание структуры проекта и точек входа. Вторая на поиск по коду: найти, где загружается конфиг, точную строку и объяснить, что происходит при ошибках. По три прогона на каждую задачу.
В моих тестах ClaudeCut вышел примерно в два раза дешевле по внутреннему счётчику Claude Code, при этом ответы были сопоставимы. На задаче с поиском по коду он ещё и сделал меньше шагов.
Ещё прогнал длинные сессии с несколькими сжатиями контекста. После сжатия ClaudeCut возвращался примерно к 14k токенов, обычный Claude Code к ~36k.
Это пока не финальный бенчмарк. Повторов мало, длинные сессии нужно прогнать ещё несколько раз, но на подписке за $20 я уже почти упёрся в лимиты, поэтому открыл репозиторий. Если пользуетесь Claude Code, прогоните тесты на своём проекте и пришлите результаты.
Люди в ответах ещё натолкнули меня на Pi + Claude Agent SDK. Там можно намного сильнее контролировать инструменты, промпты и сжатие контекста. Это хочу следующим сравнить с ClaudeCut.
Инструкция по установке, бенчмарки и методология тут:
github.com/alexgetmancom/claudecut