Uso de GitHub Copilot CLI para interactuar con aplicaciones de escritorio

Con el uso del equipo, permita que Copilot interactúe con aplicaciones de escritorio local desde GitHub Copilot CLI.

¿Quién puede utilizar esta característica?

GitHub Copilot CLI está disponible con todos los Copilot planes. Si una organización le envía Copilot, la política Copilot CLI debe estar habilitada en la configuración de la organización.

En este artículo

Nota:

El uso del equipo se encuentra versión preliminar pública y está sujeto a cambios.

Uso del ordenador

Copilot puede interactuar con las aplicaciones de escritorio en su nombre leyendo el contenido de la aplicación accesible y el contexto visual, haciendo clic en controles, escribiendo y editando texto, presionando teclas, desplazando, arrastrando y navegando por flujos de trabajo entre aplicaciones.

Esta funcionalidad es útil para los flujos de trabajo en software heredado y de solo GUI que no proporcionan una API, una interfaz de línea de comandos o una integración de MCP. Está disponible para sesiones locales en macOS y Windows.

Para obtener información sobre sus funcionalidades, controles y limitaciones, consulte Acerca del uso del equipo en GitHub Copilot.

Comprobación del estado del uso del equipo

En una sesión interactiva Copilot CLI , escriba:

Text
/computer show

Copilot CLI informa de si el complemento de uso del equipo, el servidor MCP y las habilidades asociadas están habilitados.

Habilitar el uso del ordenador

En una sesión interactiva, escriba:

Text
/computer on

Copilot CLI guarda tu preferencia y habilita el plugin incluido de uso del ordenador. Si la organización ha deshabilitado el uso del ordenador, la CLI informa de que está bloqueada por la configuración administrada. La preferencia local no puede invalidar la política.

En macOS, el uso del ordenador le guía a través de la concesión de permisos de accesibilidad y grabación de pantalla.

Uso del ordenador

El uso del equipo funciona mejor cuando se describe el resultado que desea, las aplicaciones implicadas y las restricciones importantes.

Por ejemplo:

Text
Open APP_NAME and summarize the status information shown in the
main window. Do not change any values or submit any forms.

Reemplace APP_NAME por el nombre de una aplicación instalada en el equipo.

El uso del equipo sigue el modo de permiso activo Copilot CLI. Este modo determina si Copilot pide confirmación antes de controlar una aplicación. Introduzca /permissions show para revisar el modo activo. Cuando se requiera aprobación, elija Permitir para conceder acceso a la sesión actual de uso del equipo, Permitir siempre para guardar la aprobación para futuras sesiones, o rechazar o cancelar la solicitud.

Si elige Permitir siempre para una aplicación, la aprobación guardada también se aplica al usar el equipo en GitHub Copilot app en el mismo equipo. Cuando aparezca un mensaje, confirme que la aplicación y la acción coinciden con la solicitud. Las reglas de denegación configuradas siguen teniendo prioridad.

Para interrumpir una operación activa, presione Esc dos veces.

Para obtener información sobre cómo configurar permisos de herramientas, consulte Permitir y denegar el uso de la herramienta.

Desactivar el uso del ordenador

En una sesión interactiva, escriba:

Text
/computer off

Para confirmar que el complemento y el servidor MCP están deshabilitados, use /computer show.

Solucionar problemas de uso del equipo

  • Si /computer show informa de que el uso del equipo no está disponible, confirme que la característica está disponible para su cuenta y que usa una sesión local en un sistema operativo compatible.
  • Si el uso del ordenador está habilitado pero no funciona, use /plugin para comprobar que el complemento agrupado computer-use está habilitado y /mcp list para comprobar que su servidor MCP está conectado.
  • En macOS, confirme que el asistente de uso del equipo tiene permisos de accesibilidad y grabación de pantalla.