ADX LipSync Library

什么是ADX LipSync?

ADX LipSync是通过解析音频波形,自动创建口形数据(嘴形)的中间件。
结合机器学习和信号处理技术,从音频数据创建自然的嘴形。
需要为角色与音频同步对口型时,有以下两种方法:“预先添加动作”和
“从播放音频实时决定口形”。
在这两种情况下您都可以使用ADX LipSync,以减少您的工作量和改善口形质量。

ADX LipSync的使用形式

ADX LipSync可以根据不同情况设置不同的角色口形,
其使用形式有以下两种。
  • 使用ADX LipSync工具进行预先解析
  • 使用ADX LipSync库进行实时解析
“使用ADX LipSync工具进行预先解析”在命令行工具输入音频文件后
将以文本格式输出口形数据。
导入至DCC工具后编辑,可以使用于为角色
加添面部动作。
预先解析用的工具包含在此SDK包中。
请参照以下路径的手册。
CRIWARE/Tools/ADXLipSync/manual/en/ADX_LipSync_Tool_Manual_en.html
“使用ADX LipSync库进行实时解析”可以将在游戏中已播放的音频
实时解析以获取其口形。
通过连接到 CriAtomSource 声源,无需进行复杂的编码
也可以控制模型的口形。
本手册主要假定为实时解析,并介绍如何使用ADX LipSync。

adxlipsync_library_flow.png
实时解析的概念图




ADX LipSync的特点

从输入音頻数据支持自动创建自然嘴型
解析已输入的音频数据的波形,自动输出最合适的口形。
此外,可以因应实际的发声还原,例如舌头位置和含有双唇音的开合嘴巴等。

支持2D/3D模型
创建的口形方便输出植入各种模型数据的格式。
同时支持2D/3D,通过广泛用途或种类,实现更丰富的游戏体验。

支持任何语言
不仅是日语,任何语言都可以使用ADX LipSync创建口形。
再也无需事先为每种语言准备其字典数据。
这大大减低您的游戏为进军全球市场所需的多语言开发时间。

支持不同声质
可以解析任何男女老幼配音的声质。
不论音高的高低,支持各式各样声质,可以创建不同的口形。