Как пользоваться Highlights в Copilot: навигация по приложениям Windows с помощью ИИ

Кратко:

Highlights в Copilot позволяет делиться окном приложения или вкладкой браузера и получать подсказки прямо на экране — Copilot визуально указывает, где нажать или что изменить, чтобы выполнить задачу.

Что такое Highlights и зачем это нужно

Highlights — новая функция Copilot Vision, которая даёт пошаговые подсказки внутри окна приложения или вкладки браузера. Вместо длинных текстовых инструкций или видеоуроков вы получаете визуальные указания: подсветки, стрелки и комментарии прямо на интерфейсе. Это сокращает кривую обучения для сложных приложений и экономит время при выполнении единичных задач.

Определение в одну строку: Highlights — это интерактивная визуальная навигация по элементам интерфейса приложения, управляемая Copilot при совместном доступе к окну.

Как это работает — краткая методология

1. Откройте приложение или вкладку браузера с задачей.
2. Запустите приложение Copilot и включите функцию совместного просмотра (Copilot Vision).
3. Поделитесь окном приложения или вкладкой браузера с Copilot.
4. Сформулируйте задачу простым языком: например, «Покажи, как включить Night light» или «Как добавить колонтитул в этот документ?»
5. Copilot проанализирует видимое окно и выделит элементы интерфейса, показывая шаги в контексте.

Мини-методология для сложных задач:

• Шаг 1: Определите цель (что нужно сделать).
• Шаг 2: Подготовьте окно с нужными данными.
• Шаг 3: Поделитесь окном и попросите Copilot показать шаги.
• Шаг 4: Следуйте подсказкам и проверяйте результат.

Примеры использования

• Включение Night light в приложении «Параметры».
• Добавление колонтитула в текстовом редакторе или офисном приложении.
• Добавление текста в программу для видеомонтажа.
• Сравнение списка упаковки в приложении с онлайн-списком в браузере (поддерживается совместный просмотр двух приложений).
• Поиск ошибок в коде путём одновременного сравнения редактора и онлайн-документации.

Требования и доступность

• Нужна версия приложения Copilot: 1.25044.92.0 или новее.
• Функции разворачиваются через Microsoft Store и распространяются по каналам Windows Insider.
• На данный момент сначала доступны участникам Windows Insider в США; расширенный релиз будет глобальным.
• Highlights работает с одним окном за сеанс подсветки, но Copilot Vision поддерживает совместный просмотр до двух приложений одновременно для сравнения данных.

Важно: функции в текущей версии являются бета‑функциями — возможны ошибки и нестабильная работа.

Когда Highlights полезна, а когда нет — ограничение и ошибки

Когда работает хорошо:

• Нужна локальная визуальная подсказка по конкретным элементам интерфейса.
• Интерфейс стандартный или предсказуем (системные настройки, популярные офисные приложения, известные редакторы).

Когда может не помочь:

• Пользовательский интерфейс сильно изменён модом или темой.
• Приложения с нестандартной графикой, аппаратными ускорениями или защищённым видеовыводом, который нельзя захватить инструментом совместного просмотра.
• Сложные сценарии, требующие глубокого контекста, который Copilot не видит в одном окне.

Типичные проблемы и причины:

• Нет доступа из-за ограничений конфиденциальности или прав администратора.
• Copilot неправильно распознал элементы интерфейса из‑за нестандартных шрифтов или локализации.
• Задержки в обновлении подсказок при медленном интернет‑соединении.

Проверочный список перед использованием (быстрая подготовка)

• Установлена версия Copilot 1.25044.92.0 или выше.
• Включены права на совместный просмотр экрана в настройках приложения.
• Для корпоративных устройств — разрешение от IT на использование Copilot Vision.
• Закройте лишние окна с конфиденциальными данными.

Роль‑ориентированные рекомендации

Для рядового пользователя:

• Подготовьте окно с видимыми нужными элементами.
• Попросите Copilot показать только один процесс за раз.

Для разработчика:

• Поделитесь редактором и справочным материалом одновременно.
• Используйте подсказки для поиска несоответствий между кодом и документацией.

Для IT‑администратора:

• Проверяйте соответствие политик конфиденциальности перед массовым развёртыванием.
• Тестируйте работу функции на стандартных корпоративных образах.

Советы по надёжному использованию и отладке

• Если подсказки некорректны, перезапустите Copilot и повторно поделитесь окном.
• Попробуйте переключить язык интерфейса приложения на английский, если подсказки неправильно распознают элементы в локализованной версии.
• Для чувствительных задач временно отключайте доступ к личным файлам.

Альтернативы и дополнительные подходы

• Классические пошаговые инструкции и статьи поддержки по‑прежнему полезны, когда нужно документировать процесс.
• Видео‑демонстрации останутся предпочтительным решением для длинных или комплексных рабочих процессов.
• Для сравнения версий кода лучше использовать специализированные инструменты сравнения (diff), а не только визуальную подсветку.

Модель принятия решения (простая схема)

flowchart TD
  A[Нужна ли визуальная подсказка?] -->|Да| B[Могу ли я поделиться окном?]
  A -->|Нет| C[Использовать документацию]
  B -->|Да| D[Запустить Copilot Vision и запросить Highlights]
  B -->|Нет| C
  D --> E{Подсказки корректны?}
  E -->|Да| F[Следовать подсказкам]
  E -->|Нет| G[Перезапустить/сменить язык/обратиться в поддержку]

Критерии приёмки

• Copilot выделяет элементы интерфейса и показывает последовательность действий.
• Подсказки понятны пользователю без дополнительных пояснений.
• Операция выполняется в рамках одного и того же окна/вкладки (или двух при сравнении).

Часто задаваемые вопросы

Что делать, если я не вижу опции Highlights?

Проверьте версию Copilot и наличие обновлений в Microsoft Store, а также статус вашей учётной записи в программе Windows Insider.

Работает ли это на платных профессиональных приложениях, например, Premiere Pro или Photoshop?

В теории да — если приложение позволяет захват окна и элементы интерфейса стандартно отображаются. Однако в некоторых профессиональных программах с аппаратным рендерингом подсветка может не работать.

Насколько безопасно делиться окном с Copilot?

Copilot анализирует визуальное содержимое окна. Не делитесь экранами с чувствительной информацией. Для корпоративного использования согласуйте политику с отделом безопасности.

Краткое резюме

Highlights в Copilot упрощает выполнение одноразовых и локальных задач в приложениях Windows за счёт визуальных подсказок прямо на экране. Технология эффективна для стандартных интерфейсов и полезна при сравнении двух источников, но пока остаётся бета‑функцией с ограничениями в совместимости и распознавании в нестандартных приложениях. Для безопасного и предсказуемого использования соблюдайте базовые меры предосторожности и проверяйте версию приложения.