Muse Realtime Voice 和 Muse Realtime Avatar 构成一个统一的流式架构，通过共享的语音 token 流将对话智能、语音和视频化身连接起来。
Muse Realtime Voice 生成同时编码内容和韵律的语音 token。Muse Realtime Avatar 消费这一共享流并生成流式视频。
通过使用固定长度的历史作为后续分块的运动上下文，系统在任意对话长度下保持有界计算，同时生成同步的语音、唇部动作和表情。
AI模型发布/更新09/24 13:4370
Meta 发布 Muse 实时语音与虚拟形象架构
原题：Muse Realtime Voice and Muse Realtime Avatar form a unified streaming architecture connecting conversational intelligenc…
Meta 公布 Muse Realtime Voice 与 Muse Realtime Avatar，两者通过共享的语音 token 流组成统一流式架构。Voice 生成同时编码内容与韵律的语音 token，Avatar 消费同一 token 流生成流式视频。系统以固定长度历史作为后续分块的动作上下文，使任意长度对话下的计算量保持有界，并同步生成语音、唇动和表情。原文未披露模型规模、延迟数据与开放时间。
推荐理由做实时数字人或语音 Agent 的可以看这套共享 token 流的同步思路
本文内容转载自 X @AIatMeta，由 AI（deepseek-chat）翻译整理，版权归原作者所有。
阅读原文 ↗ https://x.com/AIatMeta/status/21029972934482249851 个独立信源
- Muse Realtime Voice and Muse Realtime Avatar form a unified streaming architecture connecting conversational intelligenc…
X @AIatMeta · 09/24 13:43 · 热度 2 · 已取全文
标题与摘要由 AI（deepseek-chat）改写，可能有误，以原文为准。
相关条目
- Meta 把 40 步扩散模型蒸馏成 2 步，推理开销降 60 倍09/24 13:43
- Meta 允许 AI 眼镜用户退出视觉数据训练09/24 10:15
- Midjourney Alpha 更新：样式实时预览与默认参数上线09/24 09:59
- Meta 为 Muse AI Agent 推出电子宠物式可穿戴设备09/24 08:46
- Meta 正在开发独立 Muse AI 硬件设备 Muse Charm09/24 08:15
- Meta 预告掌上设备 Muse Charm，年底开售09/24 08:15