Интенсив 21–22.11 · БесплатноБесплатный 2-дневный интенсив по вайбкодингу 21–22 ноября в 16:00 МСК (Сб–Вс) · Живой Поток 3 стартует 23.11Записаться бесплатно →Поток 3 (23.11)
РелизAPI / Продукт · В работуMicrosoft Research→ оригинал

Microsoft Research выпустила Flint-interactive: ИИ-агенты рисуют кликабельные графики

ИИ-агенты рисуют графики в чате, но почти всегда статичные: не приблизить, не выделить группу точек. Microsoft Research выпустила язык Flint-interactive: агент описывает событие («выбраны страны») и реакцию («подсветить»), а компилятор сам обрабатывает клики и отрисовку. Так интерактивные графики выходят надёжнее и дешевле по токенам, чем при генерации кода с нуля. Разработчикам агентов проще взять готовые пресеты, чем отлаживать самописный JS.

AI-обработка оригинала Microsoft Research; редакция Hamidun News
Microsoft Research выпустила Flint-interactive: ИИ-агенты рисуют кликабельные графики
Источник: Microsoft Research. Коллаж: Hamidun News.
Слушать статью
Паспорт материала и цифры
ПараметрДанные
ПервоисточникMicrosoft Research ↗
Главный редактор
Ключевой факт #1Подключается к чату через Flint-MCP и MCP Apps
Ключевой факт #2Графики связываются с таблицами, текстом и виджетами приложения
Ключевой факт #3Для нестандартных сценариев есть программный API и обработчики событий

Попросите ИИ-агента проанализировать данные, и он, скорее всего, вернёт аккуратный, но неподвижный график. Чтобы разобраться в деталях, пользователю нужно другое: приблизить участок, сравнить две диаграммы, выделить группу стран и увидеть, где о ней говорится в тексте отчёта. Исследователи Microsoft Research предложили для этого язык Flint-interactive, который надстраивается над их библиотекой Flint и должен сделать интерактивные графики обычным результатом работы агента.

Почему агенты плохо делают интерактивные графики

Авторы описывают две проблемы. Первая — цена. Агент редко выдаёт удачную интерактивную визуализацию с первого раза: он рассуждает, пишет код, ловит ошибки, чинит их и снова запускает. Каждый круг стоит токенов и времени. Вторая — надёжность. В интерактивном графике легко получить кривую раскладку или сломанное взаимодействие, а исправление одной ошибки нередко создаёт новую.

Встроенных возможностей популярных библиотек для визуализации тоже не хватает. Они покрывают типовые случаи вроде всплывающей подсказки, но нестандартную механику, как в работах датажурналистов, приходится писать вручную. По мнению авторов, корень в том, что нет удобного языка, на котором можно коротко описать поведение графика.

Как это работает на примере

Идея в том, чтобы разделить два слоя. Визуальной логикой занимается компилятор Flint. Он превращает сырые действия вроде клика, перетаскивания или нажатия клавиши в «семантические события», то есть в понятную запись: пользователь выбрал вот эти страны или вот эту точку. Он же сам определяет, какой элемент попал под курсор, и перерисовывает холст.

Логику взаимодействия задаёт пользователь или агент. Для этого нужно связать событие с операцией обновления. Операции простые: подсветить данные, подписать точку, сдвинуть или увеличить область просмотра. Например, на двух связанных графиках можно выделить рамкой несколько стран, и на соседнем виде подсветятся те же группы. Для такого случая уже есть готовый пресет linked-brush.

Тот же принцип работает за пределами одного графика. Событие можно отправить во внешний элемент: отфильтровать таблицу, обновить другую диаграмму или изменить состояние приложения. Обратное направление тоже есть. В одном из примеров клик по строке таблицы подсвечивает точки на графике, и наоборот. Холст Flint Canvas устроен как конечный автомат: он отслеживает действия пользователя и хранит состояние отрисовки.

Для нестандартных сценариев у Flint есть программный API. Разработчик задаёт триггер и функцию-обработчик, которая превращает событие в цепочку обновлений. Обработчик может, скажем, выделить кликнутую страну и подписать её названием, комбинируя операции стиля и аннотации без обращения к деталям конкретного рендерера. Как более сложный пример авторы показывают DimpVis: пользователь тянет точку вдоль временной траектории, и у всех городов меняются температура и осадки.

Как попробовать и что стоит учесть

Есть три способа использования. Первый — для пользователей чата: Flint подключается через Flint-MCP и MCP Apps по инструкции из руководства. После этого агент генерирует спецификацию взаимодействия (interaction_spec) вместе со спецификацией самого графика и рисует результат прямо в разговоре. Выделенные пользователем элементы можно передавать в следующие вопросы, то есть уточнять запрос кликом.

Второй способ — для тех, кто строит приложения: дашборды, дата-сториз и связанные представления собираются на Flint Interactive Canvas. Приложение получает семантические события через обработчики и отправляет холсту операции обновления, например из собственных виджетов. Третий способ — для дизайнеров взаимодействий: можно придумать новое поведение и предложить его как пресет на GitHub.

Для разработчиков вывод практичный. Если вы делаете агента, который показывает клиентам данные, не стоит заставлять модель каждый раз писать интерактивный код с нуля. Выгоднее, чтобы она описывала намерение на высоком уровне, а проверенный слой сам отвечал за отрисовку и зависимости. Авторы также предлагают передать кодирующему агенту навык interaction-author, чтобы тот добавлял пресеты в ваше приложение.

Ограничения тоже есть. В анонсе нет бенчмарков: цифр по экономии токенов, доле успешных генераций или скорости нет. Утверждения о надёжности и дешевизне пока опираются на демонстрации и описание архитектуры. Выразительность ограничена словарём операций и пресетов Flint, а для необычных сценариев всё равно понадобится программный API. Сможет ли такой язык заметно сократить число итераций агента, станет понятно по реальному использованию.

Сюжет

Вопросы и ответы по материалу

Что известно по теме: почему агенты плохо делают интерактивные графики?

Авторы описывают две проблемы. Первая — цена. Агент редко выдаёт удачную интерактивную визуализацию с первого раза: он рассуждает, пишет код, ловит ошибки, чинит их и снова запускает. Каждый круг стоит токенов и времени. Вторая — надёжность. В интерактивном графике легко получить кривую раскладку или сломанное взаимодействие, а исправление одной ошибки нередко создаёт новую. Встроенных возможностей популярных библиотек для визуализации тоже не хватает.

Что известно по теме: как это работает на примере?

Идея в том, чтобы разделить два слоя. Визуальной логикой занимается компилятор Flint. Он превращает сырые действия вроде клика, перетаскивания или нажатия клавиши в «семантические события», то есть в понятную запись: пользователь выбрал вот эти страны или вот эту точку. Он же сам определяет, какой элемент попал под курсор, и перерисовывает холст. Логику взаимодействия задаёт пользователь или агент. Для этого нужно связать событие с операцией обновления.

Что известно по теме: как попробовать и что стоит учесть?

Есть три способа использования. Первый — для пользователей чата: Flint подключается через Flint-MCP и MCP Apps по инструкции из руководства. После этого агент генерирует спецификацию взаимодействия (interaction_spec) вместе со спецификацией самого графика и рисует результат прямо в разговоре. Выделенные пользователем элементы можно передавать в следующие вопросы, то есть уточнять запрос кликом.

ЖХ
Жемал Хамидун — CPO Alpina Digital, продакт-менеджер AlpinaGPT. Делает AI-продукты с 2019 года. Hamidun News — pet project, который вырос в production-агрегатор с 6000+ читателей.
✦ Практика · Hamidun Academy

Соберите рабочего ИИ-агента или сервис своими руками без ручного кода

В Академии Жемала Хамидуна (academy.hamidun.com) открыт бесплатный 72-часовой тест-драйв: интерактивные скетч-уроки по Claude Code и Cursor, живой Tech Radar и готовые шаблоны агентов.

Открыть 72ч бесплатный доступ →Интенсив по Вайб-кодингу
Что вы думаете?
Загружаем комментарии…