💻 Microsoft выпустил Copilot Vision: теперь ИИ-помощник может "видеть" ваш экран

Copilot Vision — это новая функция для от Microsoft, которая позволяет ИИ-ассистенту Copilot "слышать" и "видеть" то, что происходит на вашем экране в режиме реального времени. Главная цель — сделать взаимодействие с компьютером более интуитивным и контекстным. Функция является частью Copilot Labs, то есть пока носит экспериментальный характер и будет дорабатываться.

Какие функции доступны?

Copilot Vision выводит многозадачность на новый уровень. Вот лишь несколько примеров того, что он умеет:

✨ Анализ двух приложений одновременно: вы можете открыть два разных окна (например, документ Word и веб-страницу), и Copilot поможет сравнить информацию, найти расхождения или перенести данные, понимая контекст обеих задач.
✨ Помощь в играх и программах: застряли в игре или не можете найти нужную функцию в Photoshop? Copilot "посмотрит" на ваш экран и даст подсказку или пошаговую инструкцию.
✨ Сравнение и планирование: планируете путешествие? Откройте список вещей и расписание рейсов — Copilot проанализирует оба окна и подскажет, все ли вы учли.
✨ Визуальный анализ: ассистент может помочь с обработкой фотографий, предлагая советы по улучшению освещения или композиции.

Чем это удобно?

Представьте, что у вас за плечом стоит опытный эксперт, который видит ту же проблему, что и вы, и готов мгновенно прийти на помощь. Больше не нужно пытаться описать сложную проблему текстом — достаточно просто "показать" ее ассистенту. Это экономит массу времени, снижает когнитивную нагрузку и делает работу с любыми приложениями гораздо проще и быстрее.

Как получить доступ?

На данный момент Copilot Vision официально запущен в США для пользователей Windows 10 и Windows 11. Чтобы его активировать, нужно:

1️⃣ Открыть приложение Copilot в Windows.
2️⃣ Нажать на иконку с изображением очков справа от поля для ввода текста.
3️⃣ Разрешить доступ к экрану.

Microsoft заявила, что в ближайшее время планирует запуск "во многих других странах, не входящих в Евросоюз". Точные даты пока не называются, но география будет расширяться. Будем надеяться, что наш регион окажется в числе первых.

Почему это крутая фича?

Copilot Vision — это фундаментальный сдвиг в том, как мы взаимодействуем с ОС. Вместо того чтобы быть просто "умным" чат-ботом, Copilot становится настоящим контекстным помощником, который понимает ваши задачи на гораздо более глубоком уровне. Это еще один шаг к созданию персонального ИИ-компаньона.

💬 Тест Тьюринга. События в сфере ИИ. Подписаться