Documentación de ChatGPT
Español
Contacto goolvyouyou@gmail.com

Computer Use

Permite que ChatGPT use aplicaciones de escritorio mientras trabaja

Con Computer Use, ChatGPT puede ver y operar interfaces gráficas de usuario en macOS o Windows. Úsalo para tareas en las que las herramientas de línea de comandos o las integraciones estructuradas no sean suficientes, como comprobar una aplicación de escritorio, usar un navegador, cambiar la configuración de una aplicación, trabajar con una fuente de datos que no esté disponible como plugin o reproducir un error que solo ocurra en una interfaz gráfica de usuario.

Como Computer Use puede afectar al estado de las aplicaciones y del sistema fuera del espacio de trabajo de tu proyecto, úsalo para tareas con un alcance definido y revisa las solicitudes de permisos antes de continuar.

Configurar Computer Use

En la aplicación de escritorio de ChatGPT, selecciona ChatGPT y cambia a Work en el selector, o selecciona Codex. Abre Plugins > Computer Use y selecciona Instalar plugin si se te solicita. Si ChatGPT muestra Activar, selecciónalo. Activa los controles del servidor y de la skill de Computer Use y, a continuación, selecciona Probar ahora para comenzar.

Después, abre Configuración > Computer Use para revisar el acceso a las aplicaciones. Los controles de los navegadores conectados muestran una acción Administrar. Las aplicaciones que apruebes para tareas futuras aparecen en la sección Aplicaciones permitidas siempre.

En Windows, mantén la aplicación de destino visible en el escritorio activo mientras se ejecuta la tarea. En macOS, concede los permisos de Grabación de pantalla y Accesibilidad cuando se te soliciten para que ChatGPT pueda ver e interactuar con la aplicación de destino.

En macOS, concede:

  • El permiso de Grabación de pantalla para que ChatGPT pueda ver la aplicación de destino.
  • El permiso de Accesibilidad para que ChatGPT pueda hacer clic, escribir y navegar.

Cuándo usar Computer Use

Elige Computer Use cuando la tarea dependa de una interfaz gráfica de usuario que sea difícil de verificar únicamente mediante archivos o la salida de comandos.

Algunos casos adecuados son:

  • Probar una aplicación de macOS, una aplicación de Windows, un flujo del simulador de iOS u otra aplicación de escritorio que ChatGPT esté creando.
  • Realizar una tarea que requiera tu navegador web.
  • Reproducir un error que solo aparezca en una interfaz gráfica.
  • Cambiar configuraciones de una aplicación que requieran navegar por una interfaz mediante clics.
  • Inspeccionar información en una aplicación o fuente de datos que no esté disponible mediante un plugin.
  • En macOS, ejecutar una tarea de alcance definido en segundo plano mientras sigues trabajando en otro lugar.
  • Ejecutar un flujo de trabajo que abarque más de una aplicación.

Para las aplicaciones web que desarrolles localmente, usa primero el navegador integrado.

Uso en primer plano en Windows

En Windows, Computer Use se ejecuta en el escritorio activo. No puede operar en segundo plano mientras sigues usando la misma sesión de Windows, por lo que ChatGPT moverá el puntero, escribirá y tomará el control del primer plano mientras se ejecuta la tarea.

Para las tareas de Windows que deban continuar mientras te ausentas, mantén el dispositivo con Windows desbloqueado y conectado a Internet. Usa el control remoto desde tu teléfono para comprobar el progreso o enviar instrucciones de seguimiento, o ejecuta la aplicación de escritorio de ChatGPT dentro de una máquina virtual de Windows para que Computer Use tome el control de la máquina virtual en lugar de tu escritorio principal.

Iniciar una tarea de Computer Use

Menciona @Computer o @AppName en tu indicación, o pide a ChatGPT que use Computer Use. Describe la aplicación, ventana o flujo exactos que ChatGPT debe operar.

Open the app with Computer Use, reproduce the onboarding bug, and fix the
smallest code path that causes it. After each change, run the same UI flow
again.
Open @Chrome and verify the checkout page still works after the latest changes.

Si la aplicación de destino ofrece un plugin específico o un servidor MCP, prioriza esa integración estructurada para acceder a los datos y realizar operaciones repetibles. Elige Computer Use cuando ChatGPT necesite inspeccionar u operar la aplicación visualmente.

Permisos y aprobaciones

Los permisos del sistema para Computer Use son independientes de las aprobaciones de aplicaciones en ChatGPT. En macOS, los permisos de Grabación de pantalla y Accesibilidad permiten que ChatGPT vea y opere aplicaciones. Las aprobaciones de aplicaciones determinan qué aplicaciones permites que use ChatGPT. Las lecturas y modificaciones de archivos y los comandos del shell siguen sujetos a la configuración del entorno aislado y de las aprobaciones de la tarea.

Con Computer Use, ChatGPT solo puede ver y realizar acciones en las aplicaciones que permitas. Durante una tarea, ChatGPT solicita tu permiso antes de poder usar una aplicación de tu ordenador. Puedes elegir Permitir siempre para que ChatGPT pueda usar esa aplicación en el futuro sin volver a preguntar. Puedes eliminar aplicaciones de la lista Permitir siempre en la sección Computer Use de la configuración de la aplicación de escritorio de ChatGPT.

La aplicación de escritorio de ChatGPT solicita permiso para usar Calculadora con Computer Use

ChatGPT también puede solicitar permiso antes de realizar acciones confidenciales o disruptivas.

Si ChatGPT no puede ver o controlar una aplicación, abre Configuración del Sistema > Privacidad y seguridad y comprueba los permisos de Grabación de pantalla y Accesibilidad para Codex Computer Use en macOS. En Windows, asegúrate de que la aplicación de destino esté visible en la sesión de escritorio activa.

Configurar la política de aplicaciones de Windows

En Windows, Computer Use almacena las decisiones persistentes sobre aplicaciones en $CODEX_HOME/config.toml. Enumera las aplicaciones que Computer Use puede abrir sin solicitar permiso:

[computer_use.windows]
always_allowed_app_ids = ["mspaint.exe"]

Usa el identificador de aplicación que comunique Computer Use para Windows, como el nombre de un ejecutable para una aplicación de escritorio o un identificador de modelo de usuario de aplicación para una aplicación empaquetada. ChatGPT solicita permiso para las aplicaciones que no estén en la lista. Para revocar una decisión guardada, elimina la aplicación de Configuración > Computer Use > Permitir siempre.

Esta tabla almacena las decisiones locales de Computer Use. Es independiente de requirements.toml, aplicado por el administrador, donde los administradores pueden desactivar Computer Use con [features].computer_use = false. Las entradas antiguas de la lista de permitidos de $CODEX_HOME/computer-use/config.toml se migran a la configuración actual; su lista denied no forma parte del esquema de políticas actual.

Uso con el Mac bloqueado

El uso con el Mac bloqueado permite que ChatGPT utilice Computer Use después de que tu Mac se bloquee, pero solo después de que lo actives. Úsalo cuando una tarea de ChatGPT necesite utilizar aplicaciones de escritorio desde un dispositivo conectado después de que el Mac se bloquee.

Al activar el uso con el Mac bloqueado, ChatGPT instala un plugin de autorización de Apple que participa en el flujo de desbloqueo de macOS.

El uso con el Mac bloqueado tiene un alcance reducido de forma intencionada. No es una vía de desbloqueo remoto de uso general para tu Mac y no permite que otras aplicaciones o procesos locales desbloqueen el ordenador.

Para usarlo:

  1. Abre Configuración > Computer Use en la aplicación.
  2. Activa el uso con el Mac bloqueado.
  3. Inicia desde un dispositivo conectado una tarea que use Computer Use después de que la pantalla de tu Mac se haya bloqueado.

Cuando una tarea de ChatGPT accede a una aplicación mediante Computer Use después de que tu Mac se bloquee, ChatGPT desbloquea temporalmente el Mac, a la vez que impide el uso local y mantiene las protecciones de la pantalla bloqueada. Antes de desbloquearlo, ChatGPT comprueba si el intento de desbloqueo corresponde a un turno activo y de confianza de Computer Use. Fuera de ese breve intervalo, ChatGPT rechaza el desbloqueo y te pide que lo desbloquees manualmente si es necesario.

El uso con el Mac bloqueado incluye medidas de protección:

  • El intervalo de autorización es breve y se limita al intento de desbloqueo actual.
  • El desbloqueo automático solo está disponible para ChatGPT durante turnos activos de Computer Use.
  • ChatGPT cubre todas las pantallas mientras el escritorio está desbloqueado temporalmente.
  • Si ChatGPT detecta una entrada local del teclado o del puntero, vuelve a bloquear el Mac y pausa el desbloqueo automático hasta que lo desbloquees manualmente.

Recomendaciones de seguridad

Con Computer Use, ChatGPT puede ver el contenido de la pantalla, tomar capturas e interactuar con ventanas, menús, entradas de teclado y el estado del portapapeles en la aplicación de destino. Considera el contenido visible de las aplicaciones, las páginas del navegador, las capturas de pantalla y los archivos abiertos en la aplicación de destino como contexto que ChatGPT puede procesar mientras se ejecuta la tarea.

Mantén un alcance reducido para las tareas y permanece presente durante los flujos confidenciales:

  • Proporciona a ChatGPT una sola aplicación o un solo flujo de destino claramente definido cada vez.
  • Puedes detener la tarea o tomar el control de tu ordenador en cualquier momento.
  • Mantén cerradas las aplicaciones confidenciales salvo que sean necesarias para la tarea.
  • En Windows, ten en cuenta que ChatGPT tomará el control de las entradas en primer plano mientras trabaja; usa un dispositivo secundario, una máquina virtual o detén la tarea antes de usar personalmente ese escritorio.
  • Evita las tareas que requieran secretos, salvo que estés presente y puedas aprobar cada paso.
  • Revisa las solicitudes de permisos de las aplicaciones antes de permitir que ChatGPT use una aplicación.
  • Usa Permitir siempre solo con aplicaciones en las que confíes para que ChatGPT las utilice automáticamente en tareas futuras.
  • Permanece presente al modificar configuraciones relacionadas con cuentas, seguridad, privacidad, redes, pagos o credenciales.
  • Cancela la tarea si ChatGPT comienza a interactuar con la ventana equivocada.

Si ChatGPT usa tu navegador, puede interactuar con páginas en las que ya hayas iniciado sesión. Revisa las acciones en sitios web como si las realizaras tú mismo: las páginas web pueden contener contenido malicioso o engañoso, y los sitios pueden considerar que los clics aprobados, los envíos de formularios y las acciones con una sesión iniciada proceden de tu cuenta. Para seguir usando tu navegador mientras ChatGPT trabaja, pide a ChatGPT que utilice otro navegador.

La función no puede automatizar aplicaciones de terminal ni el propio ChatGPT, ya que automatizarlos podría eludir las políticas de seguridad de ChatGPT. Tampoco puede autenticarse como administrador ni aprobar solicitudes de permisos de seguridad y privacidad en tu ordenador.

Las modificaciones de archivos y los comandos del shell siguen sujetos a la configuración de aprobaciones y del entorno aislado de ChatGPT cuando corresponda. Los cambios realizados mediante aplicaciones de escritorio pueden no aparecer en el panel de revisión hasta que se guarden en el disco y el proyecto les dé seguimiento. Tus controles de datos de ChatGPT se aplican al contenido procesado mediante ChatGPT, incluidas las capturas de pantalla realizadas por Computer Use.