Meta анонсировала видеозвонки с ИИ-агентом Muse и интеграцию с умными очками

На конференции Connect в Менло-Парке глава Meta (признана в РФ экстремистской и запрещена) Марк Цукерберг представил обновления персонального ИИ-агента Muse. Продукт, запущенный в начале сентября, позиционируется как ключевая ставка компании в потребительском искусственном интеллекте. Агент работает на мультимодальной модели Muse Spark и подключается к приложениям и сервисам пользователя, включая электронную почту и календари. Об этом рассказывает издание Ferra.

Одним из главных анонсов стала возможность создать для агента уникальный цифровой аватар и общаться с ним в режиме видеозвонка. За эту функцию отвечает модель Muse Realtime Avatar. Ранее безликий помощник получит лицо, тело и голос, что сделает его более персонифицированным. Кроме того, Muse интегрируют с линейкой умных очков Meta: активация происходит по кодовому слову, агент сможет проводить персональные тренировки, записывать приемы пищи, бронировать встречи и помогать с покупками. Точные сроки запуска этих функций не называются, но ожидаются в ближайшие месяцы.

По словам Цукерберга, Muse станет персональным сверхинтеллектом для миллиардов людей. Он заявил, что в ближайшие годы агент будет использоваться по всему миру для достижения целей и улучшения жизни. Глава компании также отметил, что Muse будет бесплатным для большого числа токенов, а монетизация в перспективе будет строиться на небольшой комиссии от транзакций.

Meta расширяет возможности Muse на компьютерах Mac. Пользователи смогут делегировать агенту задачи, и он будет работать с любыми приложениями на рабочем столе. Как пояснил директор по ИИ Александр Ван, агент может помогать в управлении малым бизнесом или выполнять работу за пользователя, продолжая действовать даже когда тот отошел от компьютера. Muse также получит собственный адрес электронной почты, и пользователи смогут добавлять агента в цепочки писем или пересылать ему сообщения для обработки.

Компания заключила партнерства со Stripe и Shopify, что подчеркивает ставку на использование Muse в сфере покупок. Агент получит доступ ко всему каталогу товаров Shopify и сможет совершать покупки в интернете через Lync и Shop Pay, а также расширена поддержка платежей PayPal. Среди новых партнеров-ритейлеров — Best Buy, Gap, Sephora, Walmart и Wayfair, к которым добавятся Expedia и вскоре Instacart. Также среди коннекторов — GitHub, Granola и Notion.

Meta открыла платформу для разработчиков, чтобы они могли создавать собственные коннекторы. По словам Вана, за менее чем неделю поступило более 1500 заявок. Он добавил, что это может быть возможностью поколения — начать строить для новой платформы, когда она набирает обороты, и отклик пока был действительно отличным.