(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210817696.1 (22)申请日 2022.07.12 (71)申请人 网易(杭州)网络有限公司 地址 310052 浙江省杭州市滨江区网商路 599号网易大厦 (72)发明人 陈嘉毅　孙依娜　高峰　 (74)专利代理 机构 北京超凡宏宇专利代理事务 所(特殊普通 合伙) 11463 专利代理师 高燕 (51)Int.Cl. G06V 20/40(2022.01) G06V 40/16(2022.01) G06V 10/74(2022.01) G06T 13/40(2011.01) (54)发明名称 表情迁移评估方法、 装置、 电子设备及存储 介质 (57)摘要 本申请提供一种表情迁移评估方法、 装置、 电子设备及存储介质， 涉及图像处理技术领域。 该方法包括： 加载表情迁移测试集， 表情迁移测 试集中包括多个测试视频以及各测试视频对应 的标准混合变形参数， 各测试视频中的对象具有 不同的测试表情； 运行第一表情迁移程序， 对表 情迁移测试集中的各测试视频进行表情迁移， 获 取各测试视频对应的预测混合变形参数； 根据各 测试视频对应的预测混合变形参数、 以及各测试 视频对应的标准混合变形参数， 确定第一表情迁 移程序的迁移评估结果。 本方法中， 通过将第一 表情迁移程序的表情迁移结果数据化， 通过迁移 评估结果来衡量表情迁移效果， 使得对表情迁移 程序的迁移效果的评估客观化， 可信度更高。 权利要求书2页 说明书19页 附图4页 CN 115171018 A 2022.10.11 CN 115171018 A 1.一种表情迁移评估方法， 其特征在于， 应用于显示有图形用户界面的计算机设备中， 所述方法包括： 加载表情迁移测试集， 所述表情迁移测试集中包括多个测试视频以及各测试视频对应 的标准混合变形参数， 各测试视频中的对象具有不同的测试表情； 运行第一表情迁移程序， 对所述表情迁移测试集中的各测试视频进行表情迁移， 获取 各测试视频对应的预测混合变形参数； 根据各测试视频对应的预测混合变形参数、 以及各测试视频对应的标准混合变形参 数， 确定所述第一表情迁移程序的迁移评估结果。 2.根据权利要求1所述的方法， 其特征在于， 所述加载表情迁移测试集之前， 所述方法 包括： 运行第一表情迁移程序， 对表情迁移初始集中的各初始视频进行表情迁移， 获取各初 始视频对应的初始混合变形参数； 响应针对各初始视频在各帧下的初始混合变形参数的调整操作， 直至初始视频中对象 的表情与 表情迁移后的虚拟模型的表情满足预设相似度， 将当前的初始混合变形参数作为 各初始视频在各帧下的标准混合变形参数； 根据各初始视频在各帧下的标准混合变形参数， 得到各初始视频的标准混合变形参 数； 根据各初始视频、 以及各初始视频的标准混合变形参数， 得到所述表情迁移测试集。 3.根据权利要求1或2所述的方法， 其特征在于， 所述各测试视频的预测混合变形参数 包括： 帧标识、 各帧下面部不同部位的预测动作参数、 以及各帧下 各动作参数的权 重； 所述各测试视频的标准混合变形参数包括： 帧标识、 各帧下面部不同部位的标准动作 参数、 以及各帧下 各动作参数的权 重。 4.根据权利要求3所述的方法， 其特征在于， 所述根据各测试视频对应的预测混合变形 参数、 以及各测试视频对应的标准混合变形参数， 确定所述第一表情迁移程序的迁移评估 结果， 包括： 根据各测试视频对应的预测混合变形参数、 以及各测试视频对应的标准混合变形参 数， 采用欧式距离计算， 得到所述第一表情迁移程序的迁移评估结果。 5.根据权利要求4所述的方法， 其特征在于， 所述根据各测试视频对应的预测混合变形 参数、 以及各测试视频对应的标准混合变形参数， 采用欧式距离计算， 得到所述第一表情迁 移程序的迁移评估结果， 包括： 对各测试视频在各目标帧下面部不同部位的预测动作参数及面部不同部位的标准动 作参数进行求差并取绝对值， 再点乘各目标帧下各动作参数 的权重， 获取各测试视频在各 目标帧下的评估结果， 目标帧为各帧中的任一帧； 对各测试视频在各目标帧下的评估结果取平均值， 得到各测试视频对应的评估结果； 根据各测试视频对应的评估结果， 得到所述第一表情迁移程序的迁移评估结果。 6.根据权利要求1所述的方法， 其特征在于， 所述根据各测试视频对应的预测混合变形 参数、 以及各测试视频对应的标准混合变形参数， 确定所述第一表情迁移程序的迁移评估 结果之后， 所述方法包括： 运行第二表情迁移程序， 并根据运行结果确定所述第二表情迁移程序的迁移评估结权　利　要　求　书 1/2 页 2 CN 115171018 A 2果， 所述第二表情迁移程序与所述第一表情迁移程序为 不同的表情迁移程序； 根据所述第 二表情迁移程序的迁移评估结果、 以及所述第 一表情迁移程序的迁移评估 结果， 确定目标表情迁移程序。 7.根据权利要求1所述的方法， 其特征在于， 所述根据各测试视频对应的预测混合变形 参数、 以及各测试视频对应的标准混合变形参数， 确定所述第一表情迁移程序的迁移评估 结果之后， 所述方法包括： 优化所述第 一表情迁移算法中的参数， 获取所述第 一表情迁移程序的新的迁移评估结 果， 迭代执行， 直至所述新的迁移评估结果与所述第一表情迁移程序的迁移评估结果之间 满足预设条件， 则将当前的第一表情迁移算法的参数作为所述第一表情迁移 算法的目标参 数。 8.根据权利要求2所述的方法， 其特征在于， 所述运行第一表情迁移程序， 对表情迁移 初始集中的各初始视频进行表情迁移之前， 所述方法包括： 创建多个表情迁移测试用例， 各表情迁移测试用例对应不同的表情动作和/或面部部 位； 根据各表情迁移测试用例， 在标准录制环境下录制各表情迁移测试用例对应的测试视 频。 9.根据权利要求2所述的方法， 其特征在于， 所述运行第一表情迁移程序， 对所述表情 迁移测试集中的各测试视频进行表情迁移， 包括： 运行第一表情迁移程序， 对所述表情迁移测试集中的各测试视频进行表情迁移， 并为 所述图形用户界面显示的虚拟模型赋予各测试视频对应的表情， 各测试视频对应的表情根 据各测试视频对应的预测混合变形参数 得到。 10.一种表情迁移评估装置， 其特征在于， 应用于显示有图形用户界面的计算机设备 中， 所述装置包括： 加载模块、 运行模块、 确定模块； 所述加载模块， 用于加载表情迁移测试集， 所述表情迁移测试集中包括多个测试视频 以及各测试视频对应的标准混合变形参数， 各测试视频中的对象具有不同的测试表情； 所述运行模块， 用于运行第一表情迁移程序， 对所述表情迁移测试集中的各测试视频 进行表情迁移， 获取 各测试视频对应的预测混合变形参数； 所述确定模块， 用于根据各测试视频对应的预测混合变形参数、 以及各测试视频对应 的标准混合变形参数， 确定所述第一表情迁移程序的迁移评估结果。 11.一种电子设备， 其特征在于， 包括： 处理器、 存储介质和总线， 所述存储介质存储有 所述处理器可执行 的程序指令， 当电子设备运行时， 所述处理器与所述存储介质之间通过 总线通信， 所述处理器执行所述程序指令， 以执行时执行如权利要求1至9任一所述的方法 的步骤。 12.一种计算机可读存储介质， 其特征在于， 所述存储介质上存储有计算机程序， 所述 计算机程序被处 理器运行时执 行如权利要求1至9任一所述的方法的步骤。权　利　要　求　书 2/2 页 3 CN 115171018 A 3