Copilot Vision от Microsoft: Искусственный интеллект для реального мира — уже на Windows и мобильных устройствах

Copilot Vision: расширение возможностей на Windows и мобильных устройствах

ИИ-помощник Copilot от Microsoft выходит за рамки браузера Edge, обретая доступ на устройствах под управлением Windows и мобильных платформах. Теперь возможности Copilot Vision значительно расширяются.

На компьютерах с Windows Copilot Vision будет анализировать содержимое экрана, существенно облегчая взаимодействие с приложениями. Например, он сможет помочь освоить функции графического редактора Adobe Photoshop или проанализировать изображения и веб-страницы, извлекая из них необходимую информацию. Представьте, как легко будет находить нужные элементы на сложных веб-страницах или обрабатывать фотографии с помощью подсказок от искусственного интеллекта.

Пользователи мобильных устройств смогут использовать камеру в связке с Copilot Vision для анализа видео в реальном времени. Это открывает широкие возможности, например, для получения советов по уходу за комнатными растениями или планированию дизайна интерьера. Программа распознает объекты на видеопотоке и предоставляет актуальную информацию, помогая принимать обоснованные решения.

Приложение Copilot для iOS и Android уже интегрировано с Copilot Vision. Функция станет доступна пользователям Windows в ближайшее время, начав тестирование в рамках программы Windows Insiders на следующей неделе. Это позволит компании собрать обратную связь и доработать функционал до полноценного релиза.

Важно отметить разницу между Copilot Vision и функцией Recall на компьютерах с подпиской Copilot Plus. Recall выполняет автоматический захват снимков экрана (при активации), в то время как Copilot Vision скорее напоминает демонстрацию экрана, подобную той, что используется в Microsoft Teams, но с расширенными аналитическими возможностями.

Новые возможности Copilot: за пределами Vision

Помимо Copilot Vision, Microsoft представила ряд других значительных улучшений. Обновленный Copilot получил поддержку расширенной памяти, что позволяет ему сохранять контекст взаимодействия на протяжении более длительного времени. Появилась возможность персонализации, адаптирующая функционал под индивидуальные потребности пользователя. Внедрены веб-действия, позволяющие Copilot напрямую взаимодействовать с веб-ресурсами. Добавлена возможность создания подкастов, что расширяет творческие возможности пользователей. И, наконец, значительно улучшен поиск информации, позволяющий находить нужные данные более эффективно.