Эфир 18.11 · Поток 318 ноября в 19:00 МСК — бесплатный практический эфир по ИИ-агентам · Живой Поток 3 стартует 23.11Эфир 18 ноября →Поток 3 (23.11)
РелизРазбор · На радарHabr AI→ оригинал

Разбор 99 сжатий Claude Code: 35% нужных агенту деталей не попали в контекст

Когда у Claude Code кончается контекст, модель пересказывает разговор, и дальше агент живёт по этому пересказу. Автор разобрал 99 сжатий в своих логах: из 506 деталей (пути, ссылки, хэши), к которым агент вернулся, 179 (35%) в переданном контексте не нашлись. Первая оценка в 72% потерь оказалась ошибкой скрипта, договорённости выживали почти всегда. Просите выжимку перечислять пути и ссылки, а запреты держите в правилах проекта.

AI-обработка оригинала Habr AI; редакция Hamidun News
Разбор 99 сжатий Claude Code: 35% нужных агенту деталей не попали в контекст
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
Договорённости243 из 265 сохранились целиком, 19 частично, 3 пропали
Хэши коммитовпотерялись 7 из 66; все 14 номеров мерж-реквестов нашлись
Пути, ссылки, номера задачне нашлись 172 из 426 (около 40%)

Когда у Claude Code заканчивается контекст, модель пересказывает весь разговор, и дальше агент работает уже с этим пересказом. Это и называется сжатием. Представьте: вы час правили src/config.rs и договорились «пушим только после моего одобрения». После сжатия в пересказе должны остаться и файл, и запрет. Разработчик из Lamantin AI, который делает kaeru (память для агентов), проверил по своим логам, что реально теряется. Итог: из 506 деталей, к которым агент вернулся после сжатия, 179 (35%) в переданном ему контексте найти не удалось. Но главный вывод в другом: первые, куда более пугающие цифры оказались ошибкой подсчёта. Для разработчика, который каждый день работает с кодинг-агентами, это практическое руководство о том, что просить у выжимки и что держать вне разговора.

Что агент получает после сжатия

По логам Claude Code после сжатия у агента есть три источника: выжимка (цель, что сделали, какие файлы трогали, на чём остановились), несколько последних сообщений дословно и недавно прочитанные файлы, которые Claude Code прикладывает следом. Если детали нет ни в одном из них, агенту приходится искать её заново, вспоминать по косвенным признакам или брать из внешней памяти, если она подключена.

Данные: 231 сессия Claude Code с апреля по начало ноября и сессии Codex за ноябрь. После удаления дублей получилось 67 сжатий в Claude Code и 32 в Codex, всего 99. Дубли (их нашлось 38) появляются, когда продолженная сессия копирует историю вместе со старыми границами сжатия. Из 67 сжатий Claude Code 64 были автоматическими, медианный размер контекста перед ними — около 973 тысяч токенов. У Codex выжимка зашифрована, поэтому её содержимое автор проверял только на Claude Code.

Как 72% потерь превратились в 35%

Первый подсчёт был примитивным: взять все пути, ссылки, хэши и номера, которые встречались и до сжатия, и после, и проверить, есть ли они в выжимке и сохранённых сообщениях. Не нашлись 955 из 1 330, то есть 72%. Но в эту кучу попал мусор: путь из стектрейса мог мелькнуть в выводе команды и до, и после сжатия, хотя агенту он был не нужен. А часть «потерь» лежала прямо в выжимке. Показательный случай: агент после сжатия заново прочитал файл конфига по полному пути, и скрипт записал его в потери. Но в выжимке была строка «Edited src/config.rs: added CommandSpec struct». Ошибся не агент, а регулярное выражение, которое пропускало короткие пути.

Тогда автор сузил вопрос: считать только то, что встречалось до сжатия и что агент сам написал после, в команде или ответе. Остались 506 деталей:

  • 300 (59%) нашлись в выжимке или сохранённых сообщениях;
  • 27 (5%) — в приложенных файлах;
  • 179 (35%) в переданном контексте не нашлись.

По типам разница большая. Номера мерж-реквестов нашлись все 14, хэшей коммитов потерялось 7 из 66, а пути, ссылки и номера задач не нашлись в 172 случаях из 426. Автор предполагает, что короткий номер модель охотно вписывает в пересказ, а длинный путь заменяет словами вроде «правили конфиг», но эту догадку он не проверял.

Важная оговорка: 35% — это не «агент забыл». Деталь, которую агент забыл и больше не упомянул, в такой подсчёт не попадает. Это доля того, к чему агент вернулся, но чего скрипт не нашёл в контексте. Из 179 деталей 82 впервые появились после сжатия в выводе Bash, PowerShell или Read, одна — в ответе kaeru, а остальные 96 агент написал без видимого источника в логе.

Договорённости и «нарушение», которого не было

Со смыслом сравнение строк не работает, поэтому для 60 сжатий автор выписал решения из последних реплик («пушим только после моего одобрения», «этот файл не трогаем»): набралось 298. Размечала их языковая модель в два независимых прохода, а в итог вошли только совпавшие оценки. Из 265 решений 243 сохранились целиком, 19 частично, 3 пропали: например, «списать время за пятницу». Что будет с договорённостью, данной за сотню вызовов до сжатия, эти данные не говорят.

Из 152 решений, где соблюдение было видно, четыре получили метку «нарушено». Самый яркий случай: после сжатия агент, казалось, запустил сценарий без разрешения. Но в логе нашлось «го» автора, сказанное до сжатия, но уже после просьбы подождать, а в первых 30 вызовах нового запуска не было. Снова подвёл не агент, а способ проверки.

Побочная находка: напоминание «загляни в память» в установщике kaeru срабатывало при старте, продолжении и очистке сессии, но не после сжатия. Исправление уже в основной ветке. Для 14 из 179 деталей в kaeru до сжатия были успешные записи; для одной (хэш 12ce9e1) автор подтвердил, что заметка лежала в памяти к моменту сжатия. Помогла бы она агенту, не проверялось: нужен отдельный эксперимент с одинаковыми задачами с памятью и без.

Что делать на практике

  • Просите выжимку перечислять пути, ссылки и коммиты. При ручном /compact добавляйте: «перечисли пути к файлам, ссылки и коммиты, с которыми работали».
  • Жёсткие запреты держите вне разговора: в правилах проекта или в хуке. «Не пушить без подтверждения» сжатие переживает, но так надёжнее.
  • Добавьте compact в matcher хука SessionStart (startup|resume|clear|compact), чтобы после сжатия агент получал напоминание заглянуть в память.
  • Прежде чем ругать агента, проверьте выжимку и порядок реплик до сжатия.

Ограничения: это логи одного разработчика, модели и версии клиентов менялись, пути сравнивались по двум последним сегментам, а решения размечала модель. Доля повторных вызовов после сжатия не выросла: у Claude Code 5,1% после против 6,2% до, у Codex 1,5% против 4,9%. Повтор старой работы с другими аргументами такая проверка не поймает. Чтобы найти сжатия у себя, ищите compact_boundary в JSONL-файлах в ~/.claude/projects; в Codex это запись compacted с полем replacement_history.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: что агент получает после сжатия?

По логам Claude Code после сжатия у агента есть три источника: выжимка (цель, что сделали, какие файлы трогали, на чём остановились), несколько последних сообщений дословно и недавно прочитанные файлы, которые Claude Code прикладывает следом. Если детали нет ни в одном из них, агенту приходится искать её заново, вспоминать по косвенным признакам или брать из внешней памяти, если она подключена. Данные: 231 сессия Claude Code с апреля по начало ноября и сессии Codex за ноябрь.

Что известно по теме: как 72% потерь превратились в 35%?

Первый подсчёт был примитивным: взять все пути, ссылки, хэши и номера, которые встречались и до сжатия, и после, и проверить, есть ли они в выжимке и сохранённых сообщениях. Не нашлись 955 из 1 330, то есть 72%. Но в эту кучу попал мусор: путь из стектрейса мог мелькнуть в выводе команды и до, и после сжатия, хотя агенту он был не нужен. А часть «потерь» лежала прямо в выжимке. Показательный случай: агент после сжатия заново прочитал файл конфига по полному пути, и скрипт записал его в потери.

Что известно по теме: договорённости и «нарушение», которого не было?

Со смыслом сравнение строк не работает, поэтому для 60 сжатий автор выписал решения из последних реплик («пушим только после моего одобрения», «этот файл не трогаем»): набралось 298. Размечала их языковая модель в два независимых прохода, а в итог вошли только совпавшие оценки. Из 265 решений 243 сохранились целиком, 19 частично, 3 пропали: например, «списать время за пятницу». Что будет с договорённостью, данной за сотню вызовов до сжатия, эти данные не говорят.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Практика · Hamidun Academy

Соберите рабочего ИИ-агента или сервис своими руками без ручного кода

В Академии Жемала Хамидуна (academy.hamidun.com) открыт бесплатный 72-часовой тест-драйв: интерактивные скетч-уроки по Claude Code и Cursor, живой Tech Radar и готовые шаблоны агентов.

Открыть 72ч бесплатный доступ →Интенсив по Вайб-кодингу
Что вы думаете?
Загружаем комментарии…