O que é Computer Use (o agente que opera um computador)?

Computer Use (em português, "uso do computador") é a capacidade de um modelo de IA de olhar para uma tela, entender o que aparece nela e executar ações como uma pessoa: clicar, digitar e rolar a página. Em vez de se conectar a um sistema por uma ligação organizada, o agente trabalha na própria interface, como um funcionário sentado diante do computador.

Em resumo

Computer Use é uma IA que vê uma captura de tela e decide o que clicar ou digitar, de novo e de novo, até a tarefa terminar.
É útil em sistemas sem uma conexão organizada, mas é mais lento e frágil do que uma conexão direta.
OpenAI e Anthropic recomendam rodá-lo num ambiente isolado e deixar nas mãos de uma pessoa as ações irreversíveis, como uma compra.
dots, Muse e Grok Bot usam essa abordagem, cada um de um jeito.

A imagem: um funcionário diante da tela, sem acesso ao sistema

Imagine um funcionário novo que recebeu uma tarefa num sistema antigo, sem conexão com nada. Ele não consegue rodar um comando. Ele abre a tela, olha, clica num botão, olha de novo, preenche um campo e olha para conferir se funcionou.

É exatamente isso que o Computer Use faz. Ele olha para uma tela, escolhe uma ação, executa e olha de novo.

Como funciona: um ciclo de tela e ação

Segundo a documentação da OpenAI, o uso do computador acontece pela Responses API, e o ciclo é simples: você envia uma tarefa com a ferramenta de computador, o modelo devolve ações (clique, digitação, rolagem) e o seu aplicativo as executa; depois é preciso capturar a tela atualizada e devolvê-la ao modelo, para que ele confira o resultado. A documentação também descreve outro caminho, em que o modelo escreve código que roda num ambiente isolado. Na Anthropic a estrutura é parecida: o Claude pede uma ação, o aplicativo a executa e devolve o resultado, e as capturas de tela fazem parte do ciclo.

Ilustração do ciclo descrito na documentação da OpenAI e da Anthropic. Os detalhes variam entre produtos.

Como isso aparece nos agentes que já existem

Os novos agentes pessoais se apoiam todos num computador próprio, mas cada um o organiza de um jeito. Na comparação completa Muse, dots ou Grok Bot entramos em detalhes, e aqui fica só a linha geral:

dots da OpenAI: cada dot tem um computador na nuvem e um navegador privado próprios, separados do seu navegador. O login em sites é feito num formulário privado, fora da conversa.
Meta Muse: roda dentro de uma máquina virtual dedicada, e o Sentinel, um agente guardião separado, confere o que sai.
Grok Bot: todos os bots de um usuário compartilham um único computador na nuvem. Senhas e códigos são digitados por você, e o bot passa o controle para você. Segundo a documentação dele, um site pode bloquear a automação ou exigir uma etapa humana.

Por que isso importa para o negócio?

Combina

Sistema antigo no navegador, sem API
Copiar dados entre telas
Conferir se um site ou formulário funciona
Tarefas repetidas com passos fixos

Só com aprovação

Enviar e-mail ou mensagem
Compra ou pagamento
Alterar configurações da conta
Qualquer ação difícil de desfazer

Melhor uma conexão direta

Sistema que tem uma conexão organizada
Trabalho rápido em grande volume
Permissão mínima para cada sistema
Senhas e meios de pagamento

A nossa opinião: o Computer Use é a solução para onde não há conexão, não um substituto para a conexão. Quando existe uma conexão direta, como o MCP ou a interface do próprio sistema, ela é mais rápida, mais estável e mais fácil de limitar a uma permissão mínima. A tela é o último recurso.

O risco central: texto que finge ser instrução

Um agente que lê a tela também lê o que está escrito nas páginas. A OpenAI recomenda tratar o texto na tela como não confiável, incapaz de anular as instruções do usuário, e deixar nas mãos de pessoas compras, transferência de dados e mudanças destrutivas. A Anthropic recomenda rodar num ambiente isolado, não entregar senhas e chaves, limitar os sites e exigir aprovação humana para ações significativas. Esse risco se chama prompt injection.

Mitos comuns

Mito"O agente controla o meu computador"

Na práticaNa maioria dos produtos que descrevemos, ele trabalha num computador próprio na nuvem. O controle do computador pessoal, quando existe, exige uma permissão explícita sua.

Mito"É sempre melhor do que uma conexão direta"

Na práticaTrabalhar pela tela depende de a interface não mudar, e os sites podem bloqueá-lo. Quando há uma conexão, ela é preferível.

Mito"Se ele vê a tela, não erra"

Na práticaEle pode clicar no lugar errado ou entender mal uma tela. Por isso se confere depois de cada passo e se aprovam as ações sensíveis.

Conceitos próximos

A Platin Digital é OpenAI Select Partner. Nos agentes que montamos, a primeira preferência é uma conexão direta com permissão mínima, e publicar ou alterar orçamento acontece sempre com a sua aprovação.

Perguntas frequentes

O que é Computer Use?

Computer Use é a capacidade de um modelo de IA de operar um computador como uma pessoa: ele recebe uma captura de tela, decide o que fazer, executa um clique, uma digitação ou uma rolagem e depois confere o resultado numa nova tela. É usado para trabalhar em interfaces que não têm uma conexão organizada.

Em que o Computer Use difere de uma API ou do MCP?

API e MCP são conexões diretas entre o modelo e o sistema, sem tela. O Computer Use trabalha pela interface gráfica, como um usuário. É mais flexível, porém mais frágil e mais lento, por isso um conector direto é preferível quando existe.

O Computer Use é seguro?

É seguro na medida em que for configurado corretamente. As duas empresas recomendam isolar o ambiente, limitar os sites, não entregar senhas e deixar as ações irreversíveis para aprovação de uma pessoa. Sem isso, um conteúdo malicioso numa página pode enganar o agente.

Quais produtos usam Computer Use?

Entre outros, os dots da OpenAI, o Muse da Meta e o Grok Bot da SpaceXAI, além das interfaces para desenvolvedores da OpenAI e da Anthropic. Eles diferem na forma de isolar o computador e na forma de pedir a sua aprovação. A comparação completa está no artigo sobre Muse, dots e Grok Bot.