Google DeepMind transformou o cursor do mouse em um assistente de IA contextual

Google DeepMind reimaginou um dos elementos de interface mais antigos — o cursor do mouse. Agora não é apenas um apontador, mas um assistente de IA contextual que entende o que o usuário precisa, com base no que ele está apontando.

De prompts textuais a gestos

O principal problema das ferramentas de IA atuais é que o usuário é forçado a arrastar seu trabalho para uma janela separada e escrever instruções detalhadas. O novo cursor funciona exatamente onde a pessoa trabalha — no navegador, documento, tabela. Basta apontar para o elemento necessário e dar um comando: «Faça um gráfico disso», «Mostre uma rota», «Resuma em tópicos». A IA entende o contexto e executa a tarefa no local, sem mudanças entre aplicativos.

Quatro princípios de design

Google DeepMind formulou uma abordagem que transfere a carga de especificação do usuário para o computador:

• Maintain the flow — a IA se integra em todos os lugares, não distrai o usuário
• Show and tell — o sistema vê o contexto visual, não requer descrições detalhadas
• «This» e «That» — fala simples em vez de prompts longos («O que é isso?» em vez de explicações detalhadas)
• Contexto contínuo — a busca e o trabalho com informações não requerem mudança de ferramentas

Por exemplo: você está lendo um PDF, aponta para uma tabela e pede «Faça um gráfico disso» — o resultado aparece direto no documento. Ou você aponta para uma imagem de um edifício e diz «Mostre uma rota para lá» — o sistema por si só entende que a navegação é necessária.

Tecnologia e acessibilidade

O sistema funciona com base em Gemini e se integra ao Chrome. Por enquanto, são demos experimentais, mas já demonstram potencial real.

«Estamos desenvolvendo formas mais naturais de interação com IA», disse

Google DeepMind em seu post.

O cursor deve funcionar como uma ferramenta que «vê» a tela — entende em qual palavra, parágrafo, parte da imagem ou código o usuário está apontando. Isso simplifica significativamente a interação em comparação com os atuais chatbots que exigem que o usuário escreva instruções detalhadas.

O que isso significa

Se essa abordagem pegar, as interfaces mudarão. Em vez de «Abra um chatbot e descreva a tarefa», será simplesmente «Aponte para o que precisa de ajuda» — e o sistema funcionará. Isso é especialmente útil para tarefas rotineiras: resumo, conversão de formato, busca de informações, análise de dados.