Meta расширяет агента Muse: аватар, Mac, почта и покупки

На конференции Connect Meta показала новые возможности своего агента Muse: цифровой аватар для видеозвонков, работу на Mac, собственную почту и интеграции с магазинами и сервисами.

Главное
  • Muse получит цифровой аватар и видеозвонки в реальном времени на базе модели Muse Realtime Avatar.
  • Агент сможет работать на Mac, выполняя задачи в любых приложениях, пока пользователь отошёл.
  • Meta заключила партнёрства с Stripe, Shopify, PayPal, Best Buy, Gap, Sephora, Walmart, Wayfair, Expedia и другими.
Сцена с конференции Meta Connect, где Марк Цукерберг представляет новые функции ИИ-агента Muse
Фото: TechCrunch

Meta провела ежегодную конференцию Connect в Менло-Парке, где генеральный директор Марк Цукерберг представил новые возможности персонального ИИ-агента Muse. Агент, запущенный в начале сентября, работает на мультимодальной модели Muse Spark и подключается к приложениям и сервисам пользователя, включая почту и календарь.

«Центральное место в нашем видении — это Muse, — заявил Цукерберг в начале презентации. — В ближайшие годы я ожидаю, что Muse вырастет в персональный сверхинтеллект, которым будут пользоваться миллиарды людей по всему миру для достижения своих целей и улучшения жизни».

Аватар и умные очки

Muse получит собственный цифровой аватар, с которым можно будет общаться по видеосвязи в реальном времени. Для этого Meta разработала новую модель Muse Realtime Avatar. Пользователи смогут давать аватару задачи и задавать вопросы голосом.

Агент также интегрируется с линейкой умных очков Meta. Активируясь по кодовому слову, Muse сможет провести персонализированную тренировку, записать приём пищи, забронировать встречу или помочь купить товар, который пользователь видит перед собой. Meta обещает запуск этой функции «в ближайшие месяцы».

Работа на Mac и собственная почта

Muse появится на Mac: пользователи смогут делегировать агенту задачи, и он будет работать в любых приложениях на рабочем столе. «Вы можете поручить ему помочь с малым бизнесом или просто выполнить работу за вас, — сказал главный ИИ-директор Meta Александр Ванг. — Вы можете отойти от компьютера, а он продолжит работать над всеми задачами, которые вы запланировали».

Агент также получит собственный адрес электронной почты. Пользователи смогут добавлять Muse в цепочку писем или пересылать ему сообщения для обработки. Точные сроки запуска не называются.

Покупки и партнёрства

Meta заключила партнёрства со Stripe и Shopify, чтобы Muse стал инструментом для покупок. По словам Ванга, агент получает доступ ко всему каталогу товаров Shopify и может использовать Lync и Shop Pay для покупки почти anything в интернете. Также добавлена поддержка платежей через PayPal.

Среди новых партнёров-ритейлеров — Best Buy, Gap, Sephora, Walmart и Wayfair. Muse сможет подключаться к их приложениям, а также к Expedia и вскоре к Instacart. Другие коннекторы включают GitHub, Granola и Notion.

Meta открыла платформу для разработчиков, чтобы они создавали собственные коннекторы. За менее чем неделю компания получила более 1500 заявок. «Я думаю, это может быть возможностью поколения — начать строить для новой платформы, пока она набирает обороты, и отклик пока действительно отличный», — сказал Ванг.

Цукерберг также отметил, что Muse будет бесплатным для большого числа токенов, а монетизация в перспективе — за счёт небольшой комиссии с транзакций.

Для профиТехнические детали: архитектура, цифры, ссылки

Muse работает на мультимодальной модели Muse Spark, созданной для агентных задач. Новая модель Muse Realtime Avatar отвечает за видеозвонки с цифровым аватаром в реальном времени. Агент поддерживает коннекторы к внешним сервисам, включая GitHub, Granola, Notion, Expedia, Instacart, а также к ритейлерам Best Buy, Gap, Sephora, Walmart и Wayfair. Для платежей интегрированы Stripe, Shopify (Lync, Shop Pay) и PayPal. Платформа открыта для сторонних разработчиков коннекторов: за неделю подано более 1500 заявок. Цукерберг заявил, что Muse будет бесплатным для большого числа токенов, а монетизация — за счёт комиссии с транзакций.

Вопросы и ответы

Что такое Muse от Meta?
Персональный ИИ-агент, запущенный в начале сентября. Работает на модели Muse Spark, подключается к приложениям и сервисам пользователя.
Когда Muse появится на Mac?
Meta анонсировала функцию, но точные сроки не называет. Ранее компания уже говорила о планах выпустить Muse на Mac.
Сколько будет стоить Muse?
Muse будет бесплатным для большого числа токенов. Монетизация планируется за счёт небольшой комиссии с транзакций.