Microsoft превращает Copilot в центральный элемент взаимодействия с Windows 11, внедряя генеративный ИИ для голосового управления, анализа экрана и локальной автоматизации.
Пользователи теперь могут активировать Copilot на компьютерах с Windows командой «Hey Copilot». Функция опциональна и показывает значок микрофона со звуковым сигналом при активации. Сессии завершаются автоматически или по команде «Goodbye».
Компания стремится сделать Copilot основным способом взаимодействия с ПК, аналогично тому, как мышь и клавиатура когда-то изменили пользовательские привычки. По заявлениям Microsoft, пользователи голосового ввода взаимодействуют с Copilot вдвое чаще, чем текстового.
Новые возможности Copilot
Функция «Copilot Vision» теперь доступна глобально на всех устройствах с поддержкой Copilot. Она анализирует содержимое экрана и предоставляет контекстную помощь при редактировании фото, играх или работе с Office. Microsoft утверждает, что Copilot Vision может обрабатывать и анализировать целые документы в Word, Excel и PowerPoint.
- Голосовая активация командой «Hey Copilot»
- Анализ содержимого экрана в реальном времени
- Контекстная помощь в приложениях Office
- Автоматическое завершение сессий
Автономные агенты с ограничениями
«Copilot Actions» — функция в стадии тестирования, позволяющая Copilot выполнять простые задачи на локальном компьютере: поиск в PDF, сортировка фото и другие операции. Сначала функция появится в Copilot Labs для участников программы Insider. Пользователи могут наблюдать за работой Copilot или вмешиваться в любой момент.
Эти агентные функции пока ограничены и могут совершать ошибки. Они еще не могут надежно управлять сложным ПО. Исследования показывают, что системы на основе агентов остаются неточными и могут создавать риски безопасности. Microsoft утверждает, что пользовательское тестирование поможет повысить надежность.
Стремление Microsoft превратить Copilot в основной интерфейс Windows напоминает попытку заменить привычный графический интерфейс на голосового ассистента. Интересно, насколько пользователи готовы отказаться от мыши и клавиатуры в пользу постоянного голосового общения с компьютером — особенно в офисных условиях. Голосовой ввод вдвое популярнее текстового, но это пока статистика энтузиастов.
Интеграция с Manus и игровые возможности
В Windows Explorer встроен агент Manus от стартапа из Китая. Агент Manus, использующий модели Anthropic, позволяет создавать сайты из локальных файлов правым кликом. Manus также доступен как отдельное приложение и появился в Windows раньше аналогичных функций от OpenAI. Он использует «Model Context Protocol», разработанный Anthropic для системного доступа к локальному контенту.
Подключенные сервисы и игровой Copilot
Copilot Connectors позволяют получать данные из связанных сервисов: OneDrive, Outlook, Gmail или Google Drive. Можно искать встречи, контакты или документы запросами вроде «Найди детали встречи с зубным». Результаты могут напрямую передаваться в Word, Excel или PowerPoint.
В игровой сфере Copilot теперь доступен на ROG Xbox Ally — портативном устройстве от ASUS на базе Windows. «Gaming Copilot» активируется кнопкой и отвечает на вопросы или команды без паузы игры. Демо показывает его работу в «Minecraft» — помощь в навигации или объяснение игровой механики.
Большинство функций работают на любом устройстве с Windows 11, поддерживающем Copilot. Microsoft ранее продвигала «AI PC» вместе с Copilot, но теперь просто рекомендует Copilot+ PC для более быстрой обработки и локальных AI-задач. Только интеграция «Click to Do» с Zoom требует Copilot+ PC и участия в программе Windows Insider.
По сообщению The Decoder, Microsoft продолжает агрессивно продвигать Copilot как основной интерфейс операционной системы.