(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210579847.4 (22)申请日 2022.05.25 (71)申请人 未鲲 （上海） 科技 服务有限公司 地址 200000 上海市自由贸易试验区陆家 嘴环路13 33号15楼 (72)发明人 余刚盛　 (74)专利代理 机构 深圳市明日今典知识产权代 理事务所(普通 合伙) 44343 专利代理师 王杰辉　曹勇 (51)Int.Cl. H04N 7/15(2006.01) H04N 5/04(2006.01) G10L 15/26(2006.01) G06F 16/2458(2019.01) G06V 20/40(2022.01)G06V 40/16(2022.01) G06V 10/74(2022.01) (54)发明名称 会议纪要的生成方法、 装置、 计算机设备和 存储介质 (57)摘要 本申请提供了一种会议 纪要的生 成方法、 装 置、 计算机设备和存储介质， 首先采集会议视频 和会议音频， 会议视频和会议音频的时序同步。 然后通过会议视频和/或会议音频识别所有参会 人员的身份信息， 并基于时序同步从会议音 频中 获取各个参会 人员的发言信息。 最后从各个发言 信息中挖掘出重点内容， 并根据各个发言信息、 各个重点内容和对应的身份信息结合生成会议 纪要。 本申请通过对会议视频和会议音频进行参 会人员的身份信息识别和重点内容挖掘， 结合参 会人员自身的所有发言信息， 可以自动形成该次 会议的会议纪要， 不需要人工进行整理， 方便快 捷， 能够有效提高企业的办公效率。 权利要求书2页 说明书12页 附图2页 CN 115002393 A 2022.09.02 CN 115002393 A 1.一种会议纪要的生成方法， 其特 征在于， 所述方法包括： 采集会议视频和会议音频， 所述会议视频和所述会议音频的时序同步； 通过所述会议视频或所述会议音频识别所有参会人员的身份信 息， 并基于时序同步从 所述会议音频中获取 各所述参会人员的发言信息； 从各所述发言信息中挖掘出重点内容， 并根据各所述发言信息、 各所述重点内容和对 应的所述身份信息结合 生成所述会议纪要。 2.根据权利要求1所述的会议纪要的生成方法， 其特征在于， 所述通过所述会议视频识 别所有参会人员的身份信息的步骤中， 单个所述 参会人员的身份信息的识别步骤， 包括： 获取所述参会人员对应的会议子视频， 并从所述会议子视频中截取多个待选人脸图 像， 各所述待选人脸图像具有不同的正 脸展示角度； 从各所述待选人脸图像中选取所述正脸展示角度最大的一个待选人脸图像作为比对 人脸图像； 调取各所述参会人员的基准人脸图像， 并将所述比对人脸图像与各所述基准人脸图像 分别做相似度计算， 得到所述比对人脸图像与各 所述基准人脸图像之间的相似度； 选择最大相似度的所述基准人脸图像对应的参会人员信 息， 作为所述比对人脸图像对 应的所述 参会人员的所述身份信息 。 3.根据权利要求2所述的会议纪要的生成方法， 其特征在于， 所述获取所述参会人员对 应的会议子 视频的步骤之前， 包括： 根据各所述参会人员的发言时间段对所述会议视频进行分割， 得到若干个所述会议子 视频， 单个所述会议子 视频对应单个所述 参会人员。 4.根据权利要求2所述的会议纪要的生成方法， 其特征在于， 所述调取各所述参会人员 的基准人脸图像， 并将所述比对人脸图像与各所述基准人脸图像分别做相似度计算， 得到 所述比对人脸图像与各 所述基准人脸图像之间的相似度的步骤之后， 包括： 若所述比对人脸图像与各所述基准人脸图像之间的相似度均小于相似度阈值， 则将所 述比对人脸图像对应的所述 参会人员标注为外 部人员； 在所述会议纪要中， 将所述外部人员对应的所述发言信息按照预设格式进行标注显 示。 5.根据权利要求1所述的会议纪要的生成方法， 其特征在于， 所述通过所述会议音频识 别所有参会人员的身份信息的步骤中， 单个所述 参会人员的身份信息的识别步骤， 包括： 获取所述参会人员对应的会议子音频， 并判断所述会议子音频中是否存在所述参会人 员的自我介绍信息； 若所述会议子音频中存在所述参会人员的所述自我介绍信 息， 则从所述自我介绍信 息 中提取所述参会人员的所述身份信息 。 6.根据权利要求1所述的会议纪要的生成方法， 其特征在于， 所述发言信息为文本信 息， 所述从各所述 发言信息中挖掘出重点内容的步骤中， 单个所述 发言信息的挖掘步骤， 包 括： 根据预设导向词从所述发言信息中提取若干个片段信息； 将各所述片段信息按照各自在所述发言信息中的语序进行组装， 得到所述重点内容。 7.根据权利要求1所述的会议纪要的生成方法， 其特征在于， 所述从各所述发言信 息中权　利　要　求　书 1/2 页 2 CN 115002393 A 2挖掘出重点内容， 并根据各所述发言信息、 各所述重点内容和对应的所述身份信息结合生 成所述会议纪要的步骤之后， 包括： 根据各所述参会人员的所述身份信息， 获取 各所述参会人员各自对应的直属上级； 将所述会议纪要分别发送给各所述参会人员和各所述直属上级， 并在各所述直属上级 的所述会议纪要中将对应下辖的所述 参会人员的所述重点内容进行 标注显示。 8.一种会议纪要的生成装置， 其特 征在于， 所述装置包括： 采集模块， 用于采集会议视频和会议音频， 所述会议视频和所述会议音频的时序同步； 识别模块， 用于通过所述会议视频或所述会议音频识别所有参会人员的身份信息， 并 基于时序同步从所述会议音频中获取 各所述参会人员的发言信息； 生成模块， 用于从各所述发言信息 中挖掘出重点内容， 并根据 各所述发言信息、 各所述 重点内容和对应的所述身份信息结合 生成所述会议纪要。 9.一种计算机设备， 包括存储器和处理器， 所述存储器中存储有计算机程序， 其特征在 于， 所述处 理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。 10.一种计算机可读存储介质， 其上存储有计算机程序， 其特征在于， 所述计算机程序 被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。权　利　要　求　书 2/2 页 3 CN 115002393 A 3