Phoenix-4 - эмоции в 40 FPS

Tavus представила Phoenix-4 — модель реального времени для рендеринга «цифрового человека», которая генерирует изображение целиком на лету, а не воспроизводит заранее записанные лупы. Заявлены 1080p при 40 fps и полный рендер лица с мимикой, поворотами головы, взглядом и деталями вроде волос, причём каждый кадр создаётся заново. Ключевой акцент — поведение в диалоге: Phoenix-4 работает в полнодуплексном режиме и начинает реагировать, пока пользователь ещё говорит, добавляя кивки и микровыражения в такт разговору. Для выразительности заявлены более 10 эмоциональных состояний с плавными переходами, которыми можно управлять через LLM, либо отдать управление восприятию Raven-1, чтобы реакции формировались контекстно. В личном впечатлении автора это выглядит убедительнее стриминговых аватаров в HeyGen и Synthesia. Потенциальные сценарии применения описываются как терапия, обучение и поддержка — везде, где важны эмпатия и «живое» присутствие, а не формат talking head. #ai #generativeai #aivideo #voiceagents #digitalhuman #Tavus #Phoenix4 #Raven1 #real-time #fullduplex #emotionai #HeyGen #Synthesia #customerexperience #edtech

Иконка канала Гари ИИ Аватар
138 подписчиков
12+
4 просмотра
5 месяцев назад
12+
4 просмотра
5 месяцев назад

Tavus представила Phoenix-4 — модель реального времени для рендеринга «цифрового человека», которая генерирует изображение целиком на лету, а не воспроизводит заранее записанные лупы. Заявлены 1080p при 40 fps и полный рендер лица с мимикой, поворотами головы, взглядом и деталями вроде волос, причём каждый кадр создаётся заново. Ключевой акцент — поведение в диалоге: Phoenix-4 работает в полнодуплексном режиме и начинает реагировать, пока пользователь ещё говорит, добавляя кивки и микровыражения в такт разговору. Для выразительности заявлены более 10 эмоциональных состояний с плавными переходами, которыми можно управлять через LLM, либо отдать управление восприятию Raven-1, чтобы реакции формировались контекстно. В личном впечатлении автора это выглядит убедительнее стриминговых аватаров в HeyGen и Synthesia. Потенциальные сценарии применения описываются как терапия, обучение и поддержка — везде, где важны эмпатия и «живое» присутствие, а не формат talking head. #ai #generativeai #aivideo #voiceagents #digitalhuman #Tavus #Phoenix4 #Raven1 #real-time #fullduplex #emotionai #HeyGen #Synthesia #customerexperience #edtech

, чтобы оставлять комментарии