Tavus представила Griffin — модель для живого видеообщения с ИИ

Tavus представила Griffin — первую модель класса Human Interaction Model, которая ведёт видеоразговор в реальном времени. В исследовании компании 48% участников приняли аватар за настоящего человека после минутного звонка.

Главное
  • 48% участников теста Tavus поверили, что Griffin — реальный человек, после минутного видеозвонка.
  • В тесте Nvidia Griffin набрал 3,83 балла за «человечность», люди — 3,92, лучшая прежняя модель — 2,80.
  • Предварительная версия Griffin-Lite доступна избранным тестировщикам, полная версия выйдет после решения вопросов безопасности.
Иллюстрация к новости об ИИ-аватаре Griffin от Tavus для видеозвонков в реальном времени
Фото: The Decoder

Стартап Tavus из Сан-Франциско представил Griffin — модель, которую компания называет первой в классе Human Interaction Model (HIM). Она предназначена для ведения разговоров лицом к лицу в реальном времени: модель обрабатывает речь, мимику, тон голоса, жесты и паузы, одновременно принимая и генерируя видео.

Главный результат — в исследовании Tavus 48% участников после минутного видеозвонка решили, что Griffin — настоящий человек. Прежние системы в таких тестах набирали максимум 2%.

В независимом тесте Nvidia, который, по описанию Tavus, измерял, насколько человечным ощущается ИИ в прямом аудио-видео разговоре, Griffin получил 3,83 балла. Реальные люди набрали 3,92, а лучшая предыдущая ИИ-модель — 2,80.

Доступ и применение

Предварительная версия Griffin-Lite открыта для «избранных тестировщиков в рамках исследовательского превью». Более продвинутая версия выйдет, когда будут урегулированы «вопросы безопасности».

Среди возможных сценариев использования Tavus называет обучение, тренировку сложных разговоров и техподдержку через камеру.

Компания основана в 2020 году и привлекла около $64 млн. Изначально Tavus делала персонализированные ИИ-видео для продаж и маркетинга, затем перешла к живым видеобеседам с цифровыми персонами. Подробности о Griffin — в исследовательском отчёте Tavus.

Для профиТехнические детали: архитектура, цифры, ссылки

Griffin — это класс Human Interaction Model (HIM) от Tavus: модель обрабатывает речь, мимику, тон, жесты и паузы одновременно на входе и выходе видео.

  • В исследовании Tavus 48% участников приняли Griffin за человека после минутного видеозвонка; прежние системы — до 2%.
  • В независимом тесте Nvidia на «человечность» в прямом аудио-видео разговоре Griffin набрал 3,83 балла, люди — 3,92, лучшая прежняя ИИ-модель — 2,80.
  • Griffin-Lite доступна избранным тестировщикам как research preview; более способная версия выйдет после решения вопросов безопасности.
  • Tavus основана в 2020 году, привлекла около $64 млн.

Вопросы и ответы

Что такое Griffin от Tavus?
Модель класса Human Interaction Model, которая ведёт видеоразговор в реальном времени, обрабатывая речь, мимику, тон, жесты и паузы.
Можно ли уже попробовать Griffin?
Доступна только предварительная версия Griffin-Lite для избранных тестировщиков; более способная версия выйдет после решения вопросов безопасности.
Насколько модель похожа на человека?
В тесте Tavus 48% участников приняли её за человека после минутного звонка; в тесте Nvidia Griffin набрал 3,83 балла против 3,92 у людей.