Архитектор банка: в тесте METR ИИ увеличил время задач опытных разработчиков на 19%

Руководитель архитектуры российского банка на Хабре объясняет, почему вероятностные ИИ-компоненты ломают привычные чертежи. В рандомизированном тесте METR (независимая организация, оценивающая ИИ) опытные разработчики на зрелых кодовых базах тратили на задачи на 19% больше времени, хотя сами ждали ускорения на 20%. Банк отвечает проверками в пайплайне, короткоживущими токенами делегирования и обязательным подтверждением человеком. • GitClear: доля переписываемого вскоре после коммита кода выросла с 3,3% до 7,1% • 3-МР Банка России, п. 2.5: сотрудник подтверждает платежи ИИ при высоких рисках • Вендорский ИИ в SaaS и ERP выключен по умолчанию, включение — мажорное изменение

AI-обработка оригинала Habr AI; редакция Hamidun News
Архитектор банка: в тесте METR ИИ увеличил время задач опытных разработчиков на 19%
Источник: Habr AI. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникHabr AI ↗
Главный редактор
GitClearдоля переписываемого вскоре после коммита кода выросла с 3,3% до 7,1%
3-МР Банка России, п. 2.5сотрудник подтверждает платежи ИИ при высоких рисках
Ключевой факт #3Вендорский ИИ в SaaS и ERP выключен по умолчанию, включение — мажорное изменение

Руководитель архитектурной функции в российском банке опубликовал на Хабре разбор того, как генеративный ИИ и LLM-агенты меняют корпоративную архитектуру. Главный довод автора опирается на рандомизированный тест METR 2025 года (METR — независимая организация, оценивающая возможности ИИ): опытные разработчики, работавшие с ИИ на зрелых кодовых базах, потратили на задачи на 19% больше времени, чем без него. При этом сами они были уверены, что ускорились на 20%, так что разрыв между ощущением и реальностью составил 39 процентных пунктов. По мнению автора, это показывает: написание кода никогда не было узким местом энтерпрайза, а настоящая сложность — встроить новую логику в ландшафт с легаси, регуляторикой и ограничениями ИБ.

Иллюзия ускорения и цена дешёвого кода

Нейросеть снимает страх чистого листа: разработчик мгновенно получает кусок кода. Но дальше начинается интеграция. Сгенерированный код выглядит синтаксически безупречно, однако часто не учитывает неявные зависимости легаси-систем и падает в рантайме. Инженер тратит часы на отладку того, что только выглядит рабочим.

Косвенно это подтверждают данные GitClear: объём скопированного кода превысил объём отрефакторенного, а churn rate (доля свежего кода, переписываемого вскоре после коммита) вырос с 3,3% до массового внедрения ИИ до 7,1%. Отчёты DORA фиксируют ту же картину: пропускная способность растёт, стабильность поставок падает.

Вывод автора практичен: нельзя полагаться на код-ревью силами людей. Нужны детерминированные сенсоры в пайплайне — fitness functions, линтеры и контракты, которые не пустят галлюцинирующий или структурно кривой код в мастер. Архитектурные документы уступают место guardrails-as-code.

Российская регуляторика и модель как актор

Западные новости о переносе дедлайнов для российского банка почти ничего не значат. EU AI Act Omnibus отодвинул требования к системам высокого риска до 2 декабря 2027 года, а американские ФРС и FDIC документом SR 26-2 вывели генеративный и агентный ИИ из-под стандартного управления модельным риском. В России архитектуру определяют 187-ФЗ о КИИ, Положение 850-П об операционной надёжности и срок перевода значимых объектов КИИ на отечественный стек — 1 января 2028 года. Любое решение проходит фильтр реестра российского ПО, категории значимости объектов КИИ и локализации персональных данных по 152-ФЗ.

Пункт 2.5 документа 3-МР Банка России, вышедшего в июне 2026 года, рекомендует обязательное подтверждение операции сотрудником с возможностью её изменить. Это касается ИИ в критичных процессах вроде платежей при высоких рисках ИБ. Поэтому human-in-the-loop стал обязательным слоем дизайна. Над LLM банк закладывает абстракцию-роутер, чтобы смена модели из-за закона об ИИ (243-ФЗ) не парализовала работу.

Дизайн-ревью начинается с вопроса: модель — компонент или актор? Если она заперта в приложении и выдаёт ответ на экран, достаточно OWASP GenAI LLM Top 10. Если у неё есть память, доступ к API и вызов функций, применяется OWASP Agentic Top 10, где риск избыточной агентности (Excessive Agency) поднялся на третье место. Для таких агентов строят песочницы исполнения кода, жёстко лимитируют вызовы инструментов и закрывают прямой доступ к базам данных.

Агент — не сервисная учётка. Статичный API-ключ с широкими правами открывает дорогу атаке confused-deputy: хитрый промпт заставляет авторизованного агента выполнить вредоносное действие с максимальными привилегиями. Поэтому у каждого агента своя идентичность, а права выдаются короткоживущими токенами делегирования на конкретный вызов. В логах аудита видно, где действовал человек, а где агент от его имени.

Третий риск — «наследуемый» ИИ: вендоры SaaS, ERP и ITSM обновлениями включают встроенные Copilot-ы и меняют карту потоков данных, что задевает банковскую тайну (ст. 26 закона «О банках и банковской деятельности», ст. 857 ГК РФ). Политика банка — default-off для внешних ИИ-функций, включение приравнено к мажорному изменению, а учёт ведётся в отдельном реестре.

Документация для машин, конец ARB и новые NFR

Архитектурная документация (ADR, схемы C4, описания API) живёт в Git как Markdown, PlantUML и Structurizr. Агенты читают сырой текст из репозитория лучше, чем выгрузки из проприетарных систем, поэтому в репозитории лежат файлы контекста RULES.md и ARCHITECTURE.md. Для доступа банк написал внутренний слой над репозиториями с поддержкой MCP. Комитеты ARB распущены: действует advice process, где решение принимает Solution-архитектор в домене, а регуляторные контуры остаются обязательными ограничениями.

В шаблоны ADR добавили границу между детерминированной логикой и вероятностным выводом, топологию потоков данных внутри контура банка, триггеры передачи управления человеку и exit path на случай деградации вендора или смены лицензии. В нефункциональных требованиях появились метрики поведения при отказе: «правильный отказ» ценнее рискованной галлюцинации. В FinOps задан предел стоимости в токенах на каждую бизнес-транзакцию, а задержка измеряется по всему циклу с обращениями агента к внешним системам.

Открытым автор оставляет вопрос о метамоделях: ArchiMate не способен адекватно описать промпт, порог валидации или динамическую цепочку делегирования. Итог такой: чертёж обещает, как будет работать система, а вероятностный компонент таких обещаний не даёт. Остаётся ограничивать его заранее, перехватывать в момент действия и доказывать задним числом, чьими полномочиями он действовал.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: иллюзия ускорения и цена дешёвого кода?

Нейросеть снимает страх чистого листа: разработчик мгновенно получает кусок кода. Но дальше начинается интеграция. Сгенерированный код выглядит синтаксически безупречно, однако часто не учитывает неявные зависимости легаси-систем и падает в рантайме. Инженер тратит часы на отладку того, что только выглядит рабочим. Косвенно это подтверждают данные GitClear: объём скопированного кода превысил объём отрефакторенного, а churn rate (доля свежего кода, переписываемого вскоре после коммита) вырос с 3,3% до массового внедрения ИИ до 7,1%. Отчёты DORA фиксируют ту же картину: пропу

Что известно по теме: российская регуляторика и модель как актор?

Западные новости о переносе дедлайнов для российского банка почти ничего не значат. EU AI Act Omnibus отодвинул требования к системам высокого риска до 2 декабря 2027 года, а американские ФРС и FDIC документом SR 26-2 вывели генеративный и агентный ИИ из-под стандартного управления модельным риском. В России архитектуру определяют 187-ФЗ о КИИ, Положение 850-П об операционной надёжности и срок перевода значимых объектов КИИ на отечественный стек — 1 января 2028 года. Любое решение проходит фильтр реестра российского ПО, категории значимости объектов КИИ и локализации персон

Что известно по теме: документация для машин, конец ARB и новые NFR?

Архитектурная документация (ADR, схемы C4, описания API) живёт в Git как Markdown, PlantUML и Structurizr. Агенты читают сырой текст из репозитория лучше, чем выгрузки из проприетарных систем, поэтому в репозитории лежат файлы контекста RULES.md и ARCHITECTURE.md. Для доступа банк написал внутренний слой над репозиториями с поддержкой MCP. Комитеты ARB распущены: действует advice process, где решение принимает Solution-архитектор в домене, а регуляторные контуры остаются обязательными ограничениями. В шаблоны ADR добавили границу между детерминированной логикой и вероятност

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Закрытый клуб практиков · Vibe Club

Внедряйте ИИ быстрее рынка вместе с инженерами и фаундерами

Внутри Vibe Club (hamidun.com/club): еженедельные живые мастермайнды и разборы архитектуры с Жемалом Хамидуном, закрытый Tech Radar, LMS и обновляемая база из 370+ боевых скиллов.

Вступить в Vibe Club →Тест-драйв Академии (72ч)
Что вы думаете?
Загружаем комментарии…