SoulX-LiveTalk: 实时音频驱动的虚拟化身

Paper#AI Avatar Generation🔬 Research|分析: 2026年1月3日 18:55
发布: 2025年12月29日 11:18
1分で読める
ArXiv

分析

本文介绍了SoulX-LiveTalk,一个用于生成高保真、实时、音频驱动的虚拟化身的140亿参数框架。关键创新是自校正双向蒸馏策略,该策略保持双向注意力以改善运动一致性和视觉细节,以及多步回顾性自校正机制,以防止无限生成期间的错误累积。本文解决了实时虚拟化身生成中计算负载和延迟之间的平衡问题,这是该领域的一个重要问题。实现亚秒级启动延迟和实时吞吐量是一项值得注意的进步。
引用 / 来源
查看原文
"SoulX-LiveTalk is the first 14B-scale system to achieve a sub-second start-up latency (0.87s) while reaching a real-time throughput of 32 FPS."
A
ArXiv2025年12月29日 11:18
* 根据版权法第32条进行合法引用。