说明:收录90万 73个行业的国家标准 支持批量下载
(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210963518.X (22)申请日 2022.08.11 (71)申请人 上海浦东发展银行股份有限公司 地址 200001 上海市黄浦区中山 东一路12 号 (72)发明人 梁诚杰 王敏俊 阮强  (74)专利代理 机构 华进联合专利商标代理有限 公司 44224 专利代理师 黄丽霞 (51)Int.Cl. G06F 16/23(2019.01) G06K 9/62(2022.01) G06F 16/22(2019.01) (54)发明名称 数据融合处理方法、 装置、 计算机设备和存 储介质 (57)摘要 本申请涉及一种数据融合处理方法、 装置、 计算机设备、 存储介质和计算机程序产品。 通过 接收基于用户行为的实时数据, 根据预先设定的 校验规则对实时数据进行第一校验, 当第一校验 通过时, 将实时数据插入到目标数据表, 当接收 到与时间标识匹配的基于用户行为的批量数据 时, 根据时间标识对批量数据和实时数据进行第 二校验, 当第二校验通过时, 根据第二校验通过 的与时间标识匹配的批量数据和实时数据更新 目标数据表。 从而实现对批量数据和实时数据的 融合处理, 以得到最终融合后的具有统一指标和 口径的目标数据表。 权利要求书2页 说明书12页 附图4页 CN 115455016 A 2022.12.09 CN 115455016 A 1.一种数据融合处 理方法, 其特 征在于, 所述方法包括: 接收基于用户行为的实时数据, 所述实时数据中携带有对应的时间标识; 根据预先设定的校验规则对所述实时数据进行第一校验, 当所述第一校验通过时, 将 所述实时数据插 入到目标 数据表; 当接收到与 所述时间标识匹配的基于用户行为的批量数据时, 根据所述 时间标识对所 述批量数据和所述实时数据进行第二校验; 当所述第二校验通过时, 根据 所述第二校验通过的与 所述时间标识匹配的批量数据和 实时数据更新所述目标 数据表。 2.根据权利要求1所述的方法, 其特征在于, 所述根据所述第 二校验通过的与 所述时间 标识匹配的批量数据和实时数据更新所述目标 数据表, 包括: 从所述目标 数据表中删除所述第二校验通过的与所述时间标识匹配的实时数据; 将所述第二校验通过的与 所述时间标识匹配的所述批量数据插入到所述目标数据表, 得到更新后的所述目标 数据表。 3.根据权利要求1所述的方法, 其特征在于, 所述根据所述第 二校验通过的与 所述时间 标识匹配的批量数据和实时数据更新所述目标 数据表之后, 所述方法还 包括: 当接收到与 所述时间标识匹配的批量数据的更新数据时, 根据 所述更新数据替换所述 目标数据表中对应的批量数据, 得到再次更新后的所述目标 数据表。 4.根据权利要求1至 3任一项所述的方法, 其特 征在于, 所述方法还 包括: 获取不同粒度的数据统计分析指令, 根据 所述指令对更新后的所述目标数据表进行对 应粒度的统计处理, 得到分别对应不同粒度的多个数据表, 所述数据表包括事实表和维度 表。 5.根据权利要求 4所述的方法, 其特 征在于, 所述方法还 包括: 针对每一个所述数据表, 获取对应的访问权限控制信息; 当接收到对所述数据表的访问请求 时, 根据所述访问权限控制信 息对所述访问请求进 行处理。 6.根据权利要求5所述的方法, 其特征在于, 所述访问权限控制信 息包括基于机构 维度 的访问权限控制表、 基于时间维度的访问权限控制表、 基于类别维度的访问权限控制表以 及自定义的访问权限控制表中的至少一种。 7.根据权利要求1至 3任一项所述的方法, 其特 征在于, 所述方法还 包括: 当接收到数据查询请求时, 在更新后的所述目标数据表中查询, 以得到对应的查询结 果。 8.根据权利要求1至3任一项所述的方法, 其特征在于, 所述接收基于用户行为的实时 数据, 包括: 通过实时加载任务实时接收基于用户行为的实时数据; 或者, 当设定的接收时间到 达时, 触发 实时加载任务接收基于用户行为的实时数据。 9.一种数据融合处 理装置, 其特 征在于, 所述装置包括: 实时数据接收模块, 用于接收基于用户行为的实时数据, 所述实时数据中携带有对应 的时间标识; 第一校验模块, 用于根据预先设定的校验规则对所述实时数据进行第一校验, 当所述权 利 要 求 书 1/2 页 2 CN 115455016 A 2第一校验通过时, 将所述实时数据插 入到目标 数据表; 第二校验模块, 用于当接收到与所述时间标识匹配的基于用户行为的批量数据时, 根 据所述时间标识对所述批量数据和所述实时数据进行第二校验; 数据更新模块, 用于当所述第二校验通过时, 根据所述第二校验通过的与所述时间标 识匹配的批量数据和实时数据更新所述目标 数据表。 10.一种计算机设备, 包括存储器和 处理器, 所述存储器存储有计算机程序, 其特征在 于, 所述处 理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。 11.一种计算机可读存储介质, 其上存储有计算机程序, 其特征在于, 所述计算机程序 被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。 12.一种计算机程序产品, 包括计算机程序, 其特征在于, 该计算机程序被处理器执行 时实现权利要求1至8中任一项所述的方法的步骤。权 利 要 求 书 2/2 页 3 CN 115455016 A 3

PDF文档 专利 数据融合处理方法、装置、计算机设备和存储介质

文档预览
中文文档 19 页 50 下载 1000 浏览 0 评论 0 收藏 3.0分
温馨提示:本文档共19页,可预览 3 页,如浏览全部内容或当前文档出现乱码,可开通会员下载原始文档
专利 数据融合处理方法、装置、计算机设备和存储介质 第 1 页 专利 数据融合处理方法、装置、计算机设备和存储介质 第 2 页 专利 数据融合处理方法、装置、计算机设备和存储介质 第 3 页
下载文档到电脑,方便使用
本文档由 SC 于 2024-02-07 12:43:02上传分享
站内资源均来自网友分享或网络收集整理,若无意中侵犯到您的权利,敬请联系我们微信(点击查看客服),我们将及时删除相关资源。