Observação
O uso do computador está em prévia pública e sujeito a alterações.
Sobre o uso do computador
Copilot pode interagir com aplicativos da área de trabalho em seu nome lendo o conteúdo acessível do aplicativo e o contexto visual, clicando em controles, inserindo e editando texto, pressionando teclas, rolando, arrastando e navegando fluxos de trabalho entre aplicativos.
O uso do computador está disponível no GitHub Copilot CLI macOS e GitHub Copilot app no Windows.
O uso do computador expande as tarefas Copilot que podem ajudar a automatizar, incluindo fluxos de trabalho em software herdado e somente GUI que não fornecem uma API, uma interface de linha de comando ou uma integração mcp.
O uso do computador pode ajudá-lo a concluir tarefas como:
- Examinar e resumir informações em um aplicativo de área de trabalho herdado.
- Atualizando o conteúdo em uma apresentação.
- Inserção ou atualização de informações em software somente com interface gráfica.
- Mover informações entre aplicativos como parte de um fluxo de trabalho de várias etapas.
Dica
O uso do computador é destinado a tarefas que exigem interação com uma interface visual. Se uma API, um servidor MCP, um comando de terminal, uma ferramenta do sistema de arquivos ou uma ferramenta de navegador dedicada puder realizar a tarefa diretamente, essa ferramenta normalmente fornecerá informações mais estruturadas e resultados previsíveis.
Funcionalidades
Quando ativado, o uso do computador permite que Copilot:
- Leia o conteúdo do aplicativo acessível e o contexto visual por meio da árvore de acessibilidade do sistema operacional ou capturas de tela quando o contexto visual é necessário.
- Clique nos controles.
- Insira e edite texto.
- Pressione teclas, role e arraste itens.
- Navegue pelos fluxos de trabalho entre aplicativos.
O agente seleciona essas ferramentas à medida que processa seu prompt. Você pode examinar a atividade da ferramenta na sessão.
Controlando o acesso para uso do computador
O uso do computador está desativado por padrão. Você deve habilitá-lo antes que um agente possa usar suas ferramentas.
O uso do computador segue as configurações de permissão da ferramenta para a Copilot superfície em que a sessão está em execução. Essas configurações determinam se Copilot solicita aprovação antes de controlar um aplicativo da área de trabalho. Você pode alterar as configurações de permissão da ferramenta para cada superfície. Se solicitado a aprovar o acesso a um aplicativo, você poderá conceder acesso à sessão atual, salvar a aprovação para sessões futuras ou negar acesso.
Se você escolher Sempre permitir um aplicativo específico, Copilot armazenará a decisão localmente. A decisão se aplica a ambos GitHub Copilot CLI e GitHub Copilot app no mesmo computador. No aplicativo, você pode examinar a lista de aplicativos sempre permitidos e remover aprovações individuais. A remoção de um aplicativo exclui sua aprovação salva para sessões futuras no aplicativo e na CLI. Ele não revoga o acesso já concedido em uma sessão ativa.
As regras de permissão que bloqueiam uma ferramenta têm precedência sobre aprovações automáticas ou previamente salvas.
Os administradores corporativos podem desabilitar o uso do computador por meio de configurações gerenciadas. Habilitar o uso do computador localmente não substitui uma política empresarial. Para obter detalhes de configuração, consulte Configurações gerenciadas pela empresa.
Você pode interromper uma operação ativa se o uso do computador começar a agir inesperadamente. Em GitHub Copilot CLI, pressione Esc duas vezes. Em , clique em GitHub Copilot appParar ou pressione Esc.
No macOS, o uso do computador orienta você pela concessão:
- Permissão de Acessibilidade para interagir com controles do aplicativo.
- Permissão de Gravação de Tela para inspecionar as janelas do aplicativo quando o contexto visual for necessário.
Limitações e riscos
O uso do computador interpreta interfaces que podem ser alteradas entre versões de aplicativo, sistemas operacionais e estados de janela. Ele pode selecionar o controle incorreto, inserir texto no local errado ou ter dificuldade com controles não padrão ou dinâmicos e fluxos de trabalho complexos. Alterações na sincronização ou no estado da janela podem gerar resultados diferentes, fazer com que o computador repita uma ação ou impedir a continuação da ação.
Aviso
O uso de computador pode automatizar interações entre aplicativos da área de trabalho, mas também apresenta riscos de segurança. Instruções ambíguas ou conteúdo inesperado na tela podem causar ações não intencionais que afetam seu dispositivo, dados ou contas conectadas, incluindo acesso a sistemas pessoais, financeiros ou empresariais. O uso do computador não substitui o julgamento humano. Examine o aplicativo de destino, as permissões solicitadas e o resultado, especialmente antes de permitir ações que modifiquem dados ou afetem outras pessoas.
As janelas do aplicativo podem exibir informações confidenciais, incluindo informações sobre outras pessoas. Use apenas o uso do computador com aplicativos e tarefas cujo conteúdo visível você está confortável fornecendo como contexto para Copilot.
Se você escolher Sempre permitir um aplicativo, ações posteriores de uso de computador poderão controlá-lo sem perguntar novamente. Evite escolher Sempre permitir aplicativos que contenham informações confidenciais ou que dão suporte a ações de alto impacto.
Para obter informações abrangentes sobre o uso responsável, consulte Cartão de aplicativo: GitHub Copilot Agents.
Próximas Etapas
Para habilitar e usar o uso do computador, consulte: