(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210610279.X (22)申请日 2022.05.31 (71)申请人 平安银行股份有限公司 地址 518000 广东省深圳市罗湖区深南 东 路5047号 (72)发明人 董军　 (74)专利代理 机构 深圳市沃德知识产权代理事 务所(普通 合伙) 44347 专利代理师 高杰　于志光 (51)Int.Cl. G06V 20/40(2022.01) G06F 21/57(2013.01) G06V 40/16(2022.01) G06F 40/289(2020.01) G06V 10/40(2022.01)G06V 10/74(2022.01) G06V 10/82(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06Q 40/02(2012.01) G10L 17/04(2013.01) (54)发明名称 双录数据质检方法、 装置、 电子设备及可读 存储介质 (57)摘要 本发明涉及人工智能技术， 揭露了一种双录 数据质检方法， 包括： 对双录数据质检请求的采 集端进行设备安全性检测， 得到设备安全评分， 对双录数据质检请求对应的双录数据中的参与 人员进行身份识别， 得到身份识别评分， 对双录 数据进行节点划分， 得到关键节点数据， 对关键 节点数据进行声纹质检及图像质检， 得到图像质 检结果， 汇总所述身份识别评分、 所述声纹质检 结果及所述图像质检结果， 得到双录数据质检结 果。 此外， 本发明还涉及区块链技术， 所述活体检 测结果可以存储在区块链的节 点中。 本发明还提 出一种双录数据质检方法装置、 电子设备以及计 算机可读存储介质。 本发明可以解决双录数据质 检准确率和效率较低的问题。 权利要求书3页 说明书16页 附图2页 CN 114926769 A 2022.08.19 CN 114926769 A 1.一种双录数据质检方法， 其特 征在于， 所述方法包括： 接收双录数据质检请求， 对所述双录数据质检请求的采集端进行设备安全性检测， 得 到设备安全评分； 当所述设备安全评分满足预设分数条件时， 对所述双录数据质检请求对应的双录数据 中的至少两个参与人员进行身份识别， 得到身份识别评分； 根据预设的节点 话术模板对所述双录数据进行节点划分， 得到关键节点数据； 对所述关键节点数据中的语音节点数据进行声纹质检， 得到声纹质检结果， 以及对所 述关键节点数据中的视频节点数据进行图像质检， 得到图像质检结果； 汇总所述身份识别评分、 所述声纹质检结果及所述图像质检结果， 得到双录数据质检 结果。 2.如权利要求1所述的双录数据质检方法， 其特征在于， 所述对所述双录数据质检请求 的采集端 进行设备安全性检测， 得到设备安全评分， 包括： 提取所述双录数据质检请求的采集端的设备指纹； 基于所述设备指纹采集所述双录数据质检请求的采集端的设备信息； 对所述设备指纹及所述设备信 息进行防篡改检测， 并根据检测结果得到所述设备安全 评分。 3.如权利要求2中所述的双录数据质检方法， 其特征在于， 所述当所述设备安全评分满 足预设分数条件时， 对所述双录数据质检请求对应的双录数据中的至少两个参与人员进 行 身份识别， 得到身份识别评分， 包括： 当所述设备安全评分大于或等于预设的第 一阈值时， 将所述双录数据分解为语音数据 及视频数据； 利用预训练的声纹识别模型对所述语音数据中至少两个参与 人员进行声纹识别， 得到 声纹识别分数， 以及利用预训练的人脸识别模 型对所述视频数据中至少两个参与人员进 行 人脸识别， 得到人脸识别分数； 对所述至少两个参与 人员的声纹识别分数及所述人脸识别分数分别进行加权处理， 得 到所述至少两个参与人员的身份识别评分。 4.如权利要求3所述的双录数据质检方法， 其特征在于， 所述对所述双录数据质检请求 对应的双录数据中的至少两个参与人员进行身份识别之前， 所述方法还 包括： 获取预设的语音训练集合， 利用预设的声纹识别网络 中的特征提取层对所述语音训练 集合进行特征提取， 得到语音特 征集合； 随机选取所述语音特 征集合中任一说话人的语音特 征作为参考特征； 基于所述语音特 征集合及所述 参考特征计算所述声纹识别网络的损失值； 若所述声纹识别网络的损失值大于等于预设的语音损失阈值， 则返回所述随机选取所 述语音特 征集合中任一说话人的语音特 征作为参考特征的步骤； 若所述声纹识别网络的损 失值小于所述语音损 失阈值， 停止训练， 得到所述声纹识别 模型。 5.如权利要求3所述的双录数据质检方法， 其特征在于， 所述根据 预设的节点话术模板 对所述双录数据进行节点划分， 得到关键节点数据， 包括： 判断所述至少两个参与人员的身份识别评分是否都大于或等于预设的第二阈值；权　利　要　求　书 1/3 页 2 CN 114926769 A 2若所述至少两个参与人员的身份识别评分都小于所述第二阈值， 则进行安全性告警； 若所述至少两个参与 人员的身份识别评分都大于或等于所述第 二阈值， 利用预设的语 音识别模型对所述语音数据进行文本转 化， 得到语音 文本数据； 利用所述语音文本数据匹配所述节点话术模板， 并确定匹配成功的语音文本数据对应 的语音数据为所述语音节点数据； 提取所述视频数据中所述语音节点数据对应时间点的视频数据作为所述视频节点数 据； 汇总所述语音节点数据及所述视频节点数据， 得到所述关键节点数据。 6.如权利要求5所述的双录数据质检方法， 其特征在于， 所述利用所述语音文本数据匹 配所述节点话术模板， 并确定匹配成功的语音文本数据对应的语音数据为所述语音节点数 据， 包括： 对所述语音 文本数据进行分词处 理， 得到语音分词文本； 计算所述语音分词文本与所述节点 话术模板的相似度； 确定相似度大于等于预设的相似度阈值的语音分词文本对应的语音数据为所述语音 节点数据。 7.如权利要求3所述的双录数据质检方法， 其特征在于， 所述对所述关键节点数据中的 语音节点数据进行声纹质检， 得到声纹质检结果， 以及对所述关键节点数据中的视频节点 数据进行图像质检， 得到图像质检结果， 包括： 利用所述声纹识别模型识别所述语音节点数据中所有参与人员的说话人身份； 检测所述说话人身份与所述至少两个参与 人员的身份是否一致， 并根据身份检测结果 得到所述声纹质检结果； 利用预构建的图像特 征提取模型提取 所述视频节点数据中每帧图像的图像特 征； 计算所述图像特征与 预设的行为特征对比库中行为特征的相似度， 根据 所述相似度得 到所述图片质检结果。 8.一种双录数据质检装置， 其特 征在于， 所述装置包括： 设备检测模块， 用于接收双录数据质检请求， 对所述双录数据质检请求的采集端进行 设备安全性检测， 得到设备安全评分； 身份识别模块， 用于当所述设备安全评分满足预设分数条件时， 对所述双录数据质检 请求对应的双录数据中的至少两个参与人员进行身份识别， 得到身份识别评分； 节点划分模块， 用于根据预设的节点话术模板对所述双录数据进行节点划分， 得到关 键节点数据； 双录数据质检模块， 用于对所述关键节点数据中的语音节点数据进行声纹质检， 得到 声纹质检结果， 以及对所述关键节点数据中的视频节点数据进行图像质检， 得到图像质检 结果， 汇总所述身份识别评 分、 所述声纹质检结果及所述图像质检结果， 得到双录数据质检 结果。 9.一种电子设备， 其特 征在于， 所述电子设备包括： 至少一个处 理器； 以及， 与所述至少一个处 理器通信连接的存 储器； 其中， 所述存储器存储有可被所述至少一个处理器执行的计算机程序， 所述计算机程序被所权　利　要　求　书 2/3 页 3 CN 114926769 A 3