Microsoft хочет сделать Windows операционной системой на базе искусственного интеллекта и выпускает ПК Copilot+

Предстоящая функция отзыва в Windows 11 сможет «запоминать», к каким приложениям и контенту пользователь обращался на своем компьютере несколько недель или даже месяцев назад, например, помогая им найти чат Discord, где они обсуждали одежду, которую собирались купить. Пользователи могут использовать временную шкалу Recall, чтобы «прокручивать назад», чтобы увидеть, над чем они работали в недавнем прошлом, и копаться в файлах, таких как презентации PowerPoint, для просмотра информации, которая может иметь отношение к их поиску.

Microsoft заявляет, что Recall может создавать ассоциации между цветами, изображениями и многим другим, чтобы пользователи могли искать практически все на своих компьютерах на естественном языке (мало чем отличается от технологии стартапа Rewind); Разработчики смогут улучшить отзыв, добавляя контекстную информацию в свои приложения. Microsoft утверждает, что все пользовательские данные, связанные с Recall, остаются конфиденциальными и находятся на устройстве, а не используются для обучения моделей ИИ, что немаловажно.

здесь более От Microsoft: «Ваши снимки принадлежат вам; они остаются локально на вашем компьютере. Вы можете удалять отдельные снимки, настраивать и удалять временные диапазоны в настройках или приостанавливать работу в любой момент прямо с помощью значка на панели задач. Вы также можете. фильтруйте приложения и веб-сайты, чтобы они никогда не сохранялись.

Редактирование изображений и живые переводы

В Windows теперь больше искусственного интеллекта, чем когда-либо прежде, и некоторые из них являются эксклюзивными для новых ПК Copilot+.

Новая функция Supersolution позволяет восстанавливать старые фотографии, автоматически увеличивая их масштаб. Copilot теперь может анализировать изображения, чтобы предлагать пользователям идеи для творческих композиций. С помощью функции Cocreator пользователи могут создавать изображения, а также заставлять модель ИИ следовать за тем, что они рисуют, чтобы изменить или перепроектировать изображение.

В другом месте Live Captions с субтитрами переводит любой звук, проходящий через компьютер — будь то с YouTube или из локального файла — на язык по выбору пользователя. Живые переводы изначально будут поддерживать около 40 языков, включая английский, испанский, китайский и русский.

Отдельная, но связанная новая функция в Microsoft Edge обеспечивает перевод видео в реальном времени на таких сайтах, как LinkedIn, YouTube, Coursera, Reuters, CNBC, Bloomberg и других. Эта функция, которая должна стать доступной в ближайшем будущем, поддерживает перевод с испанского на английский, с английского на немецкий, хинди, итальянский, русский и испанский языки, а также переводит устный контент посредством дублирования и живых субтитров.

Второй пилот и аксессуары

Team Copilot — это новейшее расширение растущего портфеля технологий генеративного искусственного интеллекта Microsoft Copilot. Он интегрируется с Teams, приложением компании для видеоконференций, что помогает управлять повесткой дня собраний и делать заметки, соавтором которых может стать любой участник собрания. Он распространяется на Loop и Planner, платформы Microsoft для совместной работы и планирования, позволяющие создавать и назначать задачи, отслеживать сроки и уведомлять членов команды, когда требуется их вклад.

В чем-то связанных с Copilot новостях Microsoft запустила (в частной предварительной версии) Copilot Extensions, которые позволяют разработчикам расширять собственный инструмент генерации кода GitHub GitHub Copilot с помощью сторонних приложений и навыков. Партнерами по запуску являются DataStax, Docker и LambdaTest; Расширения будут размещены на GitHub Marketplace, но разработчики также смогут создавать свои собственные расширения для интеграции со своими внутренними системами и API.

Среда выполнения Copilot в Windows

Отключение таких возможностей, как Recall и Supersolution, обеспечивает Windows Copilot Runtime, набор из около 40 генеративных моделей искусственного интеллекта, которые составляют то, что Microsoft называет «новым уровнем» Windows. В сочетании с Semantic Index, векторной системой, встроенной в отдельный ПК Copilot+, среда выполнения Windows Copilot позволяет запускать приложения на базе искусственного интеллекта, включая сторонние приложения, без обязательного подключения к Интернету.

«[The runtime] Состоит из готовых к использованию API-интерфейсов искусственного интеллекта, таких как Studio Effects, Live Captions, OCR, Recall с учетом активности пользователя и [more]Давулури заявил во вторник, что приложение будет доступно разработчикам в июне.

Microsoft заявляет, что CapCut, популярный видеоредактор от владельца TikTok ByteDance, будет использовать среду выполнения Windows Copilot и сопутствующую новую библиотеку Windows Copilot, набор API и инструментов разработки искусственного интеллекта, для ускорения своих функций искусственного интеллекта. Meta добавит вышеуказанные эффекты Studio в WhatsApp, чтобы предлагать такие функции, как размытие фона и зрительный контакт во время видеозвонков.

Улучшайте конструкторы роботов

Azure AI Studio, набор инструментов в рамках службы Microsoft Azure OpenAI, который позволяет клиентам комбинировать модель искусственного интеллекта и создавать приложение, которое «думает» об этих данных, вскоре позволит разработчикам создавать приложения с использованием API-интерфейсов вывода с оплатой по мере использования — API. с помощью которого разработчики могут получать доступ к генеративным моделям ИИ, размещенным в инфраструктуре Azure, и настраивать их. Microsoft называет это «моделью как услуга» и для начала запускает модели Nixtla и Core42.

В соседнем наборе продуктов Copilot Studio Microsoft запускает Copilot Agents, которых компания описывает как ботов с искусственным интеллектом, которые могут «автономно координировать задачи, адаптированные к конкретным ролям и функциям». (Copilot Studio предоставляет инструменты для подключения Copilot для Microsoft 365, «второго пилота» на базе искусственного интеллекта в таких приложениях, как Excel и Word, со сторонними данными.) Используя память и контекстные знания, агенты Copilot могут перемещаться по различным типам бизнес-процессов, учиться на комментариях пользователей и обращаться за помощью, когда они сталкиваются с ситуациями, с которыми не знают, как справиться.

Комплект разработки Snapdragon

Qualcomm предлагает новый комплект разработки, предназначенный для разработчиков, создающих приложения для ПК Copilot+, оснащенных чипами Arm.

Комплект разработчика Snapdragon стоимостью 899,99 долларов для Windows, который имеет примерно ту же ширину, высоту и длину, что и Mac Mini от Apple, содержит процессор Qualcomm Snapdragon и множество операций ввода-вывода. Комплект разработчика поддерживает Wi-Fi 7 и Bluetooth 5.4, а через различные порты USB-C и HDMI он может одновременно подключать до трех дисплеев 4K.

ФИ-3

Microsoft объявила о дополнении к семейству моделей генеративного искусственного интеллекта Phi, Phi-3-vision, которое может выполнять общий визуальный анализ и задачи рассуждения, такие как ответы на вопросы о диаграммах и изображениях. Модель может читать как текст, так и изображения и достаточно эффективна для работы на мобильном устройстве.

Phi-3-vision доступен в предварительной версии, в то время как ранее анонсированные только текстовые аналоги модели — Phi-3-mini, Phi-3-small и Phi-3-medium — теперь общедоступны.

Партнерство с Академией Хана

Microsoft сотрудничает с Академией Хана, чтобы предоставить доступ к инфраструктуре облачных вычислений, что позволит Академии Хана предоставить преподавателям в Соединенных Штатах бесплатный доступ к инструментам Академии Хана на базе искусственного интеллекта. Microsoft заявила во вторник, что две компании также будут сотрудничать, чтобы изучить возможности улучшения приложений ИИ для преподавания математики с помощью генеративного ИИ.

Мы запускаем информационный бюллетень, управляемый искусственным интеллектом! подписка здесь Чтобы начать получать их на свои почтовые ящики 5 июня.