VK cria o Discovery AI, busca neural para a base de conteúdo de bilhões de itens do Dzen e do VK Video

A VK publicou no Habr uma análise detalhada da arquitetura do Discovery AI, sistema de busca neural que combina um grande modelo de linguagem com a base de conteúdo, de bilhões de itens, dos serviços do grupo. A tecnologia está sendo implantada em etapas no Dzen, VKontakte, VK Video e Mail Media Projects.

O que faz parte do Discovery AI

O Discovery AI não é um único modelo, mas um conjunto de componentes de IA interconectados, desenvolvidos pelo Departamento de Tecnologias Experimentais de IA da VK. O desenvolvedor líder Evgeny Astafurov descreve o sistema como um conjunto de cinco tecnologias:

• Busca neural: busca pelo sentido da consulta, e não por palavras-chave
• Análise de contexto: compreensão do histórico de interação do usuário com o conteúdo
• Personalização: adaptação dos resultados a cada pessoa
• Modelos generativos: síntese de respostas em texto a partir dos materiais encontrados
• Algoritmos de recomendação: seleção de conteúdo novo que o usuário ainda não viu

No centro do sistema está a integração de um LLM com um índice de busca e uma infraestrutura de inferência. O sistema trabalha com uma base que abrange bilhões de itens de conteúdo de todo o ecossistema da VK.

Como a busca neural difere da busca comum

Um buscador clássico procura correspondências exatas de palavras. A busca neural entende a intenção: a consulta "me indique algo sobre investimentos para iniciantes" retorna materiais relevantes mesmo que eles não contenham essas palavras específicas.

Tecnicamente, isso funciona por meio de representações vetoriais: o LLM converte a consulta e os documentos em vetores numéricos, e o sistema encontra o conteúdo mais próximo em significado. Isso permite escalar a busca para bilhões de documentos sem varrer cada um deles.

A parte generativa adiciona mais uma camada: em vez de uma lista de links, o usuário pode receber uma resposta sintetizada, montada a partir de várias fontes dentro da base da VK.

"A tecnologia está se tornando um componente importante no desenvolvimento de sistemas de recomendação e busca em nossos produtos", disse

Evgeny Astafurov, desenvolvedor líder da VK.

Para quais serviços e quem

As plataformas prioritárias para a implantação são Dzen, VKontakte, VK Video e Mail Media Projects. Além dos usuários finais, a VK planeja oferecer ferramentas baseadas no Discovery AI a criadores de conteúdo e empresas.

A implantação em etapas significa que não haverá um dia único de lançamento: a tecnologia aparecerá gradualmente nos diferentes serviços do grupo. A publicação não informa datas exatas.

O que isso significa

A VK está construindo uma infraestrutura unificada de busca com IA sobre sua própria base de conteúdo de bilhões de itens, uma vantagem competitiva fundamental que os modelos ocidentais não têm. Enquanto o Yandex desenvolve sistemas semelhantes, a VK aposta que a compreensão profunda do contexto dentro de um ecossistema fechado vale mais do que a universalidade.

Perguntas frequentes

Em quais serviços da VK a busca neural chega primeiro?

Segundo a publicação no Habr, as plataformas prioritárias são Dzen, VKontakte, VK Video e Mail Media Projects. Evgeny Astafurov não informou datas concretas para um lançamento em massa.

Criadores e empresas terão acesso ao Discovery AI?

Sim. A VK afirmou que as ferramentas baseadas no Discovery AI estarão disponíveis não apenas para os usuários finais, mas também para criadores de conteúdo e clientes corporativos dos serviços do grupo.