金融界 2024 年 9 月 18 日消息,天眼查知识产权信息显示,马上消费金融股份有限公司申请一项名为“数字人表情生成方法及装置“,公开号 CN202410659263.7,申请日期为 2024 年 5 月。
专利摘要显示,本申请实施例公开了一种数字人表情生成方法及装置,方法包括:基于所述第一音频数据集的文本数据集、情感数据集以及所述表情参数数据集训练得到第一神经网络模型,其中,所述第一音频数据集和所述表情参数数据集的采样频率相同,所述第一音频数据集中的数据与所述表情参数数据集中的数据一一对应;基于目标损失函数和所述第一神经网络模型得到第二神经网络模型;基于第二音频数据集和所述第二神经网络模型得到目标表情参数数据;基于虚拟引擎和所述目标表情参数数据生成数字人表情。通过从语音数据中剥离文本数据和情绪数据,并将两者作为神经网络模型的输入生成数字人表情,提高生成的数字人表情的准确性。