Использование приложение Copilot GitHub для взаимодействия с классическими приложениями

С помощью компьютера можно Copilot взаимодействовать с локальными классическими приложениями из .GitHub Copilot app

Кто может использовать эту функцию?

GitHub Copilot app доступна для всех Copilot планов.
Download GitHub Copilot app

В этой статье

Примечание.

Использование компьютера выполняется Публичный предварительный просмотр и подлежит изменению.

Сведения об использовании компьютера

Copilot может взаимодействовать с классическими приложениями от вашего имени, считывая доступное содержимое приложения и визуальный контекст, щелкнув элементы управления, ввод и редактирование текста, нажатие клавиш, прокрутку, перетаскивание и навигацию рабочих процессов между приложениями.

Эта возможность полезна для рабочих процессов в устаревшем программном обеспечении, который не предоставляет API, интерфейс командной строки или интеграцию MCP. Он доступен для локальных сеансов в macOS и Windows.

Сведения о его возможностях, элементах управления и ограничениях см. в разделе Сведения об использовании компьютера в GitHub Copilot.

Включение использования компьютера

  1. Откройте параметры для GitHub Copilot app.
  2. На боковой панели выберите "Использование компьютера".
  3. В разделе "Включение использования компьютера" включите включение использования компьютера.
  4. В macOS в разделе "Предварительные требования" предоставьте оба необходимых разрешения:
    • Предоставьте разрешение на специальные возможности , чтобы разрешить компьютеру взаимодействовать с элементами управления приложениями.
    • Предоставьте разрешение на запись экрана , чтобы разрешить компьютеру проверять окна приложений при необходимости визуального контекста.
  5. В macOS, если изменение разрешения не обнаружено, нажмите кнопку "Проверить еще раз".

Вы также можете использовать /computer on команду в сеансе. Чтобы проверить текущее состояние подключаемого модуля и MCP, используйте /computer show.

Использование компьютера

Использование компьютера лучше всего подходит при описании нужного результата, приложений и любых важных ограничений.

Рассмотрим пример.

Text
Open APP_NAME and summarize the status information shown in the
main window. Do not change any values or submit any forms.

Замените APP_NAME именем приложения, установленного на компьютере.

Компьютер используется в разделе "Разрешения инструментов " приложения. Этот параметр определяет, запрашивает ли Copilot утверждение перед контролем приложения. Чтобы просмотреть или изменить параметр, откройте параметры приложения и выберите "Сеансы". Если требуется утверждение, убедитесь, что запрошенное приложение и действие соответствуют запросу. Затем выберите "Разрешить предоставить доступ для текущего сеанса использования компьютера", всегда разрешать сохранять утверждение для будущих сеансов или отклонять или отменять запрос.

Чтобы прервать активную операцию, нажмите кнопку "Остановить " или нажмите клавишу ESC.

Просмотр всегда разрешенных приложений

При выборе always allow in GitHub Copilot app or GitHub Copilot CLI, утверждение сохраняется и применяется к обоим поверхностям на одном компьютере.

  1. Откройте параметры для GitHub Copilot app.
  2. На боковой панели выберите "Использование компьютера".
  3. В разделе "Всегда разрешенные приложения" щелкните значок удаления рядом с приложением.

Удаление приложения удаляет сохраненное утверждение для будущих сеансов как в приложении, так и в CLI. Он не отменяет доступ, уже предоставленный в запущенном сеансе. Нажмите кнопку "Остановить " или нажмите клавишу ESC , чтобы остановить текущую операцию. Завершите сеанс, чтобы отозвать доступ к приложению, предоставленный для этого сеанса.

Отключение использования компьютера

Откройте параметры для GitHub Copilot app. На боковой панели выберите "Использование компьютера", а затем отключите включение использования компьютера.

Вы также можете использовать /computer off в сеансе.

Устранение неполадок с использованием компьютера

  • Если страница " Параметры использования компьютера " недоступна, убедитесь, что эта функция доступна для вашей учетной записи и операционной системы.
  • В macOS, если компьютер не может взаимодействовать с приложениями, убедитесь, что специальные возможности и запись экрана****отображаются в разделе "Предварительные требования".