Оглавление

Microsoft превращает Copilot в центральный элемент взаимодействия с Windows 11, внедряя генеративный ИИ для голосового управления, анализа экрана и локальной автоматизации.

Пользователи теперь могут активировать Copilot на компьютерах с Windows командой «Hey Copilot». Функция опциональна и показывает значок микрофона со звуковым сигналом при активации. Сессии завершаются автоматически или по команде «Goodbye».

Компания стремится сделать Copilot основным способом взаимодействия с ПК, аналогично тому, как мышь и клавиатура когда-то изменили пользовательские привычки. По заявлениям Microsoft, пользователи голосового ввода взаимодействуют с Copilot вдвое чаще, чем текстового.

Новые возможности Copilot

Функция «Copilot Vision» теперь доступна глобально на всех устройствах с поддержкой Copilot. Она анализирует содержимое экрана и предоставляет контекстную помощь при редактировании фото, играх или работе с Office. Microsoft утверждает, что Copilot Vision может обрабатывать и анализировать целые документы в Word, Excel и PowerPoint.

  • Голосовая активация командой «Hey Copilot»
  • Анализ содержимого экрана в реальном времени
  • Контекстная помощь в приложениях Office
  • Автоматическое завершение сессий

Автономные агенты с ограничениями

«Copilot Actions» — функция в стадии тестирования, позволяющая Copilot выполнять простые задачи на локальном компьютере: поиск в PDF, сортировка фото и другие операции. Сначала функция появится в Copilot Labs для участников программы Insider. Пользователи могут наблюдать за работой Copilot или вмешиваться в любой момент.

Эти агентные функции пока ограничены и могут совершать ошибки. Они еще не могут надежно управлять сложным ПО. Исследования показывают, что системы на основе агентов остаются неточными и могут создавать риски безопасности. Microsoft утверждает, что пользовательское тестирование поможет повысить надежность.

Стремление Microsoft превратить Copilot в основной интерфейс Windows напоминает попытку заменить привычный графический интерфейс на голосового ассистента. Интересно, насколько пользователи готовы отказаться от мыши и клавиатуры в пользу постоянного голосового общения с компьютером — особенно в офисных условиях. Голосовой ввод вдвое популярнее текстового, но это пока статистика энтузиастов.

Интеграция с Manus и игровые возможности

В Windows Explorer встроен агент Manus от стартапа из Китая. Агент Manus, использующий модели Anthropic, позволяет создавать сайты из локальных файлов правым кликом. Manus также доступен как отдельное приложение и появился в Windows раньше аналогичных функций от OpenAI. Он использует «Model Context Protocol», разработанный Anthropic для системного доступа к локальному контенту.

Подключенные сервисы и игровой Copilot

Copilot Connectors позволяют получать данные из связанных сервисов: OneDrive, Outlook, Gmail или Google Drive. Можно искать встречи, контакты или документы запросами вроде «Найди детали встречи с зубным». Результаты могут напрямую передаваться в Word, Excel или PowerPoint.

В игровой сфере Copilot теперь доступен на ROG Xbox Ally — портативном устройстве от ASUS на базе Windows. «Gaming Copilot» активируется кнопкой и отвечает на вопросы или команды без паузы игры. Демо показывает его работу в «Minecraft» — помощь в навигации или объяснение игровой механики.

Большинство функций работают на любом устройстве с Windows 11, поддерживающем Copilot. Microsoft ранее продвигала «AI PC» вместе с Copilot, но теперь просто рекомендует Copilot+ PC для более быстрой обработки и локальных AI-задач. Только интеграция «Click to Do» с Zoom требует Copilot+ PC и участия в программе Windows Insider.

По сообщению The Decoder, Microsoft продолжает агрессивно продвигать Copilot как основной интерфейс операционной системы.