唇音同步
从文本到唇部动作
- 语音输入文本
- TTS 语音合成
- 动作预测音频-动作模型
- 物理执行多维舵机指令
- 机器人唇部动作
用真实机器人的配对数据,建立嘴型与动作之间的映射。
| 音素 | 嘴型类别 |
|---|---|
| /p/ /b/ /m/ | 双唇音 |
| /f/ /v/ | 唇齿音 |
| /θ/ /ð/ | 齿间音 |
| /u/ /o/ /w/ | 圆唇音 |
| /a/ /æ/ | 开元音 |
典型发音
依次为:爸爸、拜拜(双唇音),飞(唇齿音),乌龟(圆唇音)。EVA 二代口部实拍。
机器人语音由 AI 合成
EVA 二代的口型使用 13 路通道,由中英文语音实时驱动。



