首页  专利技术  电子电路装置的制造及其应用技术

一种海量主数据融合方法及装置与流程

2026-03-15 10:00:01 286次浏览

技术特征:

1.一种海量主数据融合方法,其特征在于,该方法包括以下步骤:

2.如权利要求1所述的海量主数据融合方法,其特征在于:所述海量主数据融合装置主要包括融合规则配置单元、版本号生成单元、融合结果存储单元;

3.如权利要求1所述的海量主数据融合方法,其特征在于:所述取数字段置信度各因数得分规则表,其中:

4.如权利要求1所述的海量主数据融合方法,其特征在于:所述版本号生成单元包括:

5.如权利要求1所述的海量主数据融合方法,其特征在于:所述融合结果存储单元包括:

6.一种海量主数据融合装置,其特征在于,包括:


技术总结
本发明提供了一种海量主数据融合方法及装置。该方法包括:通过设计主数据表的结构;为属性字段配置一个或多个来源表的取数字段,并设置来源表取数字段的置信度,以及来源表的数据内容更新时间字段;运行数据融合任务,从配置的来源表读取数据,包括主键字段和取数字段的内容,根据取数字段的置信度、数据内容更新时间、数据内容是否为空,综合计算后生成该字段内容的版本号,将主键、主数据字段名、字段内容、版本号一同写入HBase表。HBase根据新写入的版本号与该字段内容当前版本号,按数值大小做比较。完成主数据融合,查询主数据表,获取融合后的主数据。本发明在处理海量主数据融合方面提供了高效、可靠和经济的方法。

技术研发人员:刘忻,李才胜,李伟文
受保护的技术使用者:广州市品高软件股份有限公司
技术研发日:
技术公布日:2024/11/26
文档序号 : 【 40123778 】

技术研发人员:刘忻,李才胜,李伟文
技术所有人:广州市品高软件股份有限公司

备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
刘忻李才胜李伟文广州市品高软件股份有限公司
基于信息熵的火电机组保供能力评价方法、系统、设备及介质与流程 比较器电路、集成电路、电子设备及时序设计方法与流程
相关内容