HPC-Ops, da Tencent: software chinês extrai o máximo do hardware americano

Enquanto o setor discute a qualidade das respostas dos LLMs, a Tencent decidiu arrumar a forma como essas respostas são geradas. O HPC-Ops é um conjunto de ferramentas para otimizar a inferência no nível mais baixo. Os desenvolvedores focaram nos gargalos: as operações Attention, Grouped GEMM e as camadas Mixture of Experts (MoE). O principal valor é que não se trata de um projeto teórico, mas de código testado nas nuvens da Tencent. Qualquer projeto em C++ ou Python pode usar esses kernels CUDA para reduzir a latência e economizar no aluguel de GPUs. Com a escassez de chips, esse tipo de otimização passa a importar mais que os próprios modelos.

Processado por IA de MarkTechPost; editado por Hamidun News
HPC-Ops, da Tencent: software chinês extrai o máximo do hardware americano
Fonte: MarkTechPost. Colagem: Hamidun News.
Ouvir artigo

Enquanto o mundo todo debate qual modelo é mais inteligente, os engenheiros da Tencent resolveram cuidar de um problema mais terra a terra, mas muito mais importante: como parar de queimar orçamento com computação ineficiente. Todo mundo se acostumou a ver redes neurais escritas em Python, mas, quando chega a carga real em produção, linguagens interpretadas viram um peso. É preciso acesso direto ao hardware, e é exatamente isso que a nova biblioteca HPC-Ops oferece. Não é só mais um punhado de scripts, mas uma biblioteca completa de operadores para inferência de alto desempenho, que a Tencent Hunyuan vem testando há anos em seus serviços internos.

O problema é simples: arquiteturas modernas, como Mixture of Experts (MoE) ou transformers com contexto enorme, exigem muito da largura de banda de memória e do poder de processamento da GPU. As bibliotecas padrão da NVIDIA nem sempre se encaixam nas necessidades específicas de cada arquitetura. A Tencent apostou na customização e reescreveu os principais kernels CUDA para operações como Attention e Grouped GEMM. São os tijolos com que se constrói qualquer modelo de linguagem atual. Se os tijolos são tortos, o prédio inteiro balança e as contas de nuvem sobem.

O HPC-Ops deu atenção especial ao Fused MoE, técnica que permite unir várias etapas de cálculo em uma única passagem pela memória. Em arquiteturas de mistura de especialistas isso é crítico, já que o envio constante de dados entre diferentes partes da placa de vídeo gera grandes atrasos. Otimizar esses processos faz os modelos responderem mais rápido, o que afeta diretamente a experiência do usuário. Ninguém quer esperar cinco segundos até o chatbot descobrir como terminar uma frase.

Por que a Tencent decidiu abrir o código justamente agora? A resposta está no contexto global. Sob sanções e com a escassez de chips avançados como o H100, as empresas chinesas são forçadas a virar campeãs de eficiência. Quando não se tem um estoque infinito de placas de vídeo, o jeito é polir o software até brilhar. Ao lançar o HPC-Ops em código aberto, a Tencent na prática oferece ao mercado um padrão que pode competir com soluções da NVIDIA ou da Meta*. É um movimento forte na disputa por influência entre os desenvolvedores de infraestrutura.

Para o desenvolvedor comum, isso significa que a barreira de entrada para criar serviços de IA rápidos e baratos ficou um pouco menor. A biblioteca oferece APIs compactas para C e Python, o que permite integrar essas soluções a projetos existentes sem reescrever tudo do zero. É uma ponte entre a pesquisa acadêmica e o ambiente corporativo exigente, onde cada milissegundo conta.

No longo prazo, lançamentos assim mudam o panorama do setor. Estamos saindo da era do "só faça funcionar" para a era do "faça com a máxima eficiência". A Tencent deixa claro que não é apenas consumidora de tecnologia, mas uma das que ditam as regras no nível da arquitetura. Resta saber com que rapidez outros grandes players vão adotar essas soluções e se o HPC-Ops vai se tornar parte do stack padrão de inferência de LLMs no mundo todo.

O ponto principal: a Tencent leva a disputa pelo mercado de IA para o campo da eficiência computacional. Os frameworks ocidentais conseguirão oferecer algo tão otimizado para MoE?

*A Meta foi classificada como organização extremista e é proibida na Rússia.

História
ZK
Zhemal Khamidun — CPO da Alpina Digital, gerente de produto do AlpinaGPT. Cria produtos de IA desde 2019. O Hamidun News é um projeto pessoal que virou um agregador em produção com mais de 6.000 leitores.
✦ Unified AI Workspace · Nomad

Test Frontier LLMs & Autonomous Agents in One Workspace

Run Claude Opus 5.5, GPT-6, Gemini 3.1, and DeepSeek side-by-side in Nomad AI (nomadnet.ai) — unified model routing, deep research, and multimodal workflows under one subscription.

Try Nomad AI →Launch Nomad Agent
O que você acha?
Carregando comentários…