¿Qué es Computer Use (un agente que maneja un ordenador)?

Computer Use (en español, "uso del ordenador") es la capacidad de un modelo de IA de mirar una pantalla, entender lo que muestra y ejecutar acciones como una persona: hacer clic, escribir y desplazarse. En lugar de conectarse a un sistema mediante una conexión ordenada, el agente trabaja en la propia interfaz, como un empleado sentado frente al ordenador.

En resumen

Computer Use es una IA que ve una captura de pantalla y decide qué pulsar o escribir, una y otra vez, hasta terminar la tarea.
Es útil en sistemas sin una conexión ordenada, pero es más lento y más frágil que una conexión directa.
OpenAI y Anthropic recomiendan ejecutarlo en un entorno aislado y dejar en manos de una persona las acciones irreversibles, como una compra.
dots, Muse y Grok Bot usan este enfoque, cada uno a su manera.

La imagen: un empleado frente a una pantalla, sin acceso al sistema

Imagina a un empleado nuevo al que le dieron una tarea en un sistema antiguo, sin conexión con nada. No puede ejecutar un comando. Abre la pantalla, mira, pulsa un botón, vuelve a mirar, rellena un campo y mira para comprobar que funcionó.

Eso es exactamente lo que hace Computer Use. Mira una pantalla, elige una acción, la ejecuta y vuelve a mirar.

Cómo funciona: un bucle de pantalla y acción

Según la documentación de OpenAI, el uso del ordenador se hace mediante la Responses API y el ciclo es sencillo: se envía una tarea junto con la herramienta de ordenador, el modelo devuelve acciones (clic, escritura, desplazamiento), tu aplicación las ejecuta, y después hay que capturar la pantalla actualizada y devolvérsela al modelo, para que pueda comprobar el resultado. Junto a esto, la documentación incluye también una vía en la que el modelo escribe código que se ejecuta en un entorno aislado. En Anthropic la estructura es similar: Claude pide una acción, la aplicación la ejecuta y devuelve el resultado, y las capturas de pantalla forman parte del ciclo.

Ilustración del ciclo descrito en la documentación de OpenAI y de Anthropic. Los detalles varían entre productos.

Cómo se ve en los agentes que ya existen

Los nuevos agentes personales se apoyan todos en un ordenador propio, pero cada uno lo organiza de otra manera. Los detallamos en la comparación completa Muse, dots o Grok Bot, y aquí solo la línea general:

dots de OpenAI: cada dot tiene su propio ordenador en la nube y un navegador privado, separado de tu navegador. El inicio de sesión en sitios web se hace en un formulario privado, fuera de la conversación.
Meta Muse: funciona dentro de una máquina virtual dedicada, y Sentinel, un agente guardián independiente, revisa lo que sale al exterior.
Grok Bot: todos los bots de un usuario comparten un único ordenador en la nube. Las contraseñas y los códigos los escribes tú, y el bot te pasa el control. Según su documentación, un sitio puede bloquear la automatización o exigir un paso humano.

¿Por qué importa para un negocio?

Conviene

Un sistema antiguo en el navegador sin API
Copiar datos entre pantallas
Comprobar que un sitio o un formulario funcionan
Tareas repetidas con pasos fijos

Solo con aprobación

Enviar un correo o un mensaje
Una compra o un pago
Cambiar la configuración de una cuenta
Cualquier acción difícil de deshacer

Mejor una conexión directa

Un sistema con conexión ordenada
Trabajo rápido en gran volumen
Permiso mínimo para cada sistema
Contraseñas y medios de pago

Nuestra opinión: Computer Use es una solución para donde no hay conexión, no un sustituto de la conexión. Cuando existe una conexión directa, como MCP o la interfaz del propio sistema, es más rápida, más estable y más fácil de limitar a un permiso mínimo. La pantalla es el último recurso.

El riesgo principal: texto que finge ser una instrucción

Un agente que lee una pantalla lee también lo que está escrito en las páginas. OpenAI recomienda tratar el texto en pantalla como no fiable, incapaz de anular las instrucciones del usuario, y dejar en manos de personas las compras, la transferencia de datos y los cambios destructivos. Anthropic recomienda ejecutarlo en un entorno aislado, no entregarle contraseñas ni claves, limitar los sitios y exigir aprobación humana para las acciones importantes. Este riesgo se llama prompt injection.

Mitos frecuentes

Mito"El agente controla mi ordenador"

En realidadEn la mayoría de los productos que describimos trabaja en un ordenador propio en la nube. El control de tu ordenador personal, cuando existe, requiere un permiso explícito tuyo.

Mito"Siempre es mejor que una conexión directa"

En realidadTrabajar a través de la pantalla depende de que la interfaz no cambie, y los sitios pueden bloquearlo. Cuando hay una conexión, es preferible.

Mito"Si ve la pantalla, no se equivocará"

En realidadPuede hacer clic en el lugar equivocado o interpretar mal una pantalla. Por eso se comprueba después de cada paso y se aprueban las acciones sensibles.

Conceptos cercanos

Platin Digital es OpenAI Select Partner. En los agentes que configuramos, la primera preferencia es una conexión directa con permiso mínimo, y publicar o cambiar el presupuesto siempre con tu aprobación.

Preguntas frecuentes

¿Qué es Computer Use?

Computer Use es la capacidad de un modelo de IA de manejar un ordenador como una persona: recibe una captura de pantalla, decide qué hacer, ejecuta un clic, una escritura o un desplazamiento, y después comprueba el resultado en una pantalla nueva. Se usa para trabajar en interfaces que no tienen una conexión ordenada.

¿En qué se diferencia Computer Use de una API o de MCP?

Una API y MCP son conexiones directas entre el modelo y un sistema, sin pantalla. Computer Use trabaja a través de la interfaz gráfica, como un usuario. Es más flexible, pero más frágil y más lento, por lo que una conexión directa es preferible cuando existe.

¿Es seguro Computer Use?

Es seguro en la medida en que se configure bien. Ambas compañías recomiendan aislar el entorno, limitar los sitios, no entregar contraseñas y dejar las acciones irreversibles a la aprobación de una persona. Sin esto, un contenido malicioso en una página puede engañar al agente.

¿Qué productos usan Computer Use?

Entre otros, dots de OpenAI, Muse de Meta y Grok Bot de SpaceXAI, además de las interfaces para desarrolladores de OpenAI y de Anthropic. Se distinguen por cómo aíslan el ordenador y por cómo te piden aprobación. La comparación completa está en el artículo sobre Muse, dots y Grok Bot.