Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
Безопасность и правоAPI / Продукт · В работуHabr AI→ оригинал

VibeCBS собирает прозвища проектов заранее: агент находит в 2,8 раза больше документов

Один проект живёт под тремя именами: в трекере «Меню на неделю», в вики «Недельная подписка на еду», в чате «Ужинатор». Агент с одним названием ответит «выпускаем в пятницу» и не увидит чат, где запуск уже перенесли. VibeCBS собирает такие прозвища заранее: по 300 эпикам (крупным проектам) поиск дал 13 178 документов вместо 4 741, в 2,8 раза больше. Искать прозвища стоит до первого вопроса.

AI-обработка оригинала Habr AI; редакция Hamidun News
VibeCBS собирает прозвища проектов заранее: агент находит в 2,8 раза больше документов
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
Ключевой факт #1Имя записывают при 3 подтверждениях с оценкой выше 0,8 или 2 — от 0,95
Сбор карточки76 обращений к источникам, при повторе — ноль
Разбор одной карточки7 вызовов модели и около 250 тысяч токенов

Один и тот же проект в компании почти всегда живёт под несколькими именами, и поисковый агент обычно знает только одно из них. Представьте вымышленный проект «Меню на неделю»: с пятницы компания хочет продавать ужины сразу на семь дней. Вы открываете эпик (так называют крупную задачу, в которую собраны мелкие) в трекере.

Все задачи закрыты, в последнем комментарии написано «обсудили в чате». В каком именно чате, непонятно. Разработчик удивляется: «Так в Ужинаторе же».

А страница с требованиями в Confluence называется «Недельная подписка на еду». Три имени одного проекта — это алиасы. Внутри команды их все знают, а агент нет.

Разработчик платформы VibeCBS показал на данных продакшена, во сколько раз это сужает поиск: по 300 крупным эпикам число найденных документов выросло с 4 741 до 13 178, то есть в 2,8 раза, когда алиасы стали частью запроса.

Почему агент уверенно отвечает неправильно

Если у агента есть только название из трекера, он найдёт закрытые задачи и план с пятничной датой. У него будут настоящие ссылки, и он ответит: «Да, в пятницу выпускаем». Ответ выглядит надёжно, потому что подкреплён источниками. Но решение продакта о переносе запуска лежит в Telegram-ветке, где проект называют «Ужинатор».

Автор, который делает VibeCBS — платформу для работы с корпоративными данными, — показывает, как человек добирается до этого слова. Сначала берёт номер эпика MENU-42 и ищет его в текстах Confluence. Находит требования с другим заголовком. По адресу страницы находит в чате ответ разработчика, а в вопросе к нему видит слово «ужинатор». По этому слову в Slack находится отчёт тестировщика, а в Telegram — вопрос «Ужинатор оставляем в письме?» и ответ продакта: «Переносим запуск на следующую неделю». Старое имя дало вчерашнее «отправляем», прозвище — сегодняшнее «не отправляем».

Когда слово становится именем проекта

Не всякое слово годится в алиасы. Если искать просто «подписка», в соседнем чате найдётся «поправили подписку», но к заказам на неделю это не относится. Поэтому в VibeCBS поиск алиасов вынесен в отдельный этап, и работает он в два шага.

Пробовать слово в поиске можно по одной реплике: модель предлагает следующий запрос и показывает, откуда взяла слово. Запрос попадает в очередь проекта, код запускает поиск, по идентификаторам отсеивает уже просмотренные записи и отдаёт модели только новые.

А вот записать слово в карточку проекта сложнее. Нужны независимые подтверждения. Модель оценивает по шкале от 0 до 1, насколько уверенно каждое из них связывает слово с проектом, а код проверяет, хватает ли оснований. Достаточно трёх подтверждений с оценкой выше 0,8 или двух, если обе оценки не ниже 0,95. Пороги настраиваются. Независимость здесь важна: ссылку на один и тот же отчёт тестировщика можно переслать в десять чатов, но отчёт всё равно один. Для «ужинатора» подтверждений два: ответ разработчика со ссылкой на требования и отчёт тестировщика по задаче из MENU-42. Если модель оценит каждое хотя бы на 0,95, имя попадёт в карточку вместе со ссылками на источники.

Цифры с продакшена и экономика токенов

21 ноября автор взял на проде VibeCBS 300 крупных эпиков за 2026 год. У 217 из них нашлись алиасы. Для каждого эпика он посчитал, сколько разных документов вернул поиск: документом может быть и задача, и страница требований. Только по названиям эпиков в сумме вышло 4 741 документ. С подтверждёнными алиасами из карточек — 13 178. Выдача выросла почти в 3 раза (точнее, в 2,8).

Оговорка по методике: внутри эпика документы считаются без повторов, но если страница обсуждает два эпика, в общую сумму она попадёт дважды. К тому же рост числа документов не равен росту полезных ответов. Это показатель охвата, а не точности.

Главная инженерная идея — не заставлять первого пользователя ждать. Можно поручить первому агенту разобраться и сохранить имена для следующих, но тогда человек будет ждать, пока агент ходит по задачам и чатам. Вместо этого алиасы ищутся на бутстрапе, то есть при первом разборе всего корпоративного корпуса, а потом обновляются по мере новых сообщений и изменений в задачах. Такая предварительная работа называется прекомпьютом.

Расход измерен на одном среднем эпике. Код сделал 76 обращений к источникам для сбора материалов карточки, а при повторном запуске увидел, что сбор закончен, и не сделал ни одного нового. На разбор материалов одной карточки ушло 7 вызовов модели и около 250 тысяч токенов. Платить эту цену каждый раз, когда кто-то открывает новый чат, расточительно. Плюс общая карточка даёт одинаковый результат всем агентам: и тому, кто спрашивает про запуск, и коллеге из маркетинга, которому нужно письмо.

Что делать на практике

Если вы строите корпоративный RAG или агента-помощника, проверьте, как он находит проекты не по официальному названию. Соберите алиасы заранее, требуйте несколько независимых источников и храните ссылки на них рядом с именем. Один и тот же пересланный документ не считайте за разные подтверждения.

У такой схемы тоже есть ограничение. Даже с карточкой нужно смотреть, до какой даты видна переписка: автор перед отправкой письма всё равно проверит, что продакт написал последним. Если в поиске есть данные только по четверг, придётся открыть сам чат или честно сказать коллеге, по какой день у вас есть информация.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: почему агент уверенно отвечает неправильно?

Если у агента есть только название из трекера, он найдёт закрытые задачи и план с пятничной датой. У него будут настоящие ссылки, и он ответит: «Да, в пятницу выпускаем». Ответ выглядит надёжно, потому что подкреплён источниками. Но решение продакта о переносе запуска лежит в Telegram-ветке, где проект называют «Ужинатор». Автор, который делает VibeCBS — платформу для работы с корпоративными данными, — показывает, как человек добирается до этого слова.

Что известно по теме: когда слово становится именем проекта?

Не всякое слово годится в алиасы. Если искать просто «подписка», в соседнем чате найдётся «поправили подписку», но к заказам на неделю это не относится. Поэтому в VibeCBS поиск алиасов вынесен в отдельный этап, и работает он в два шага. Пробовать слово в поиске можно по одной реплике: модель предлагает следующий запрос и показывает, откуда взяла слово. Запрос попадает в очередь проекта, код запускает поиск, по идентификаторам отсеивает уже просмотренные записи и отдаёт модели только новые.

Что известно по теме: цифры с продакшена и экономика токенов?

21 ноября автор взял на проде VibeCBS 300 крупных эпиков за 2026 год. У 217 из них нашлись алиасы. Для каждого эпика он посчитал, сколько разных документов вернул поиск: документом может быть и задача, и страница требований. Только по названиям эпиков в сумме вышло 4 741 документ. С подтверждёнными алиасами из карточек — 13 178. Выдача выросла почти в 3 раза (точнее, в 2,8). Оговорка по методике: внутри эпика документы считаются без повторов, но если страница обсуждает два эпика, в общую сумму она попадёт дважды.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Единое AI-пространство · Nomad

Протестируйте новые LLM и мультимодальные модели в одном окне

Платформа Nomad AI (nomadnet.ai) даёт прямой доступ к Claude Opus 5.5, GPT-6, Gemini 3.1, DeepSeek и автономным агентам без VPN, зарубежных карт и зоопарка подписок.

Открыть Nomad AI →Автономный Nomad Agent
Что вы думаете?
Загружаем комментарии…