首页  专利技术  电子电路装置的制造及其应用技术

一种基于大数据算法的并行预处理分析系统及应用方法与流程

2026-03-18 14:20:07 13次浏览

技术特征:

1.一种基于大数据算法的并行预处理分析系统,其特征在于:包括基础子系统和新技术子系统,

2.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述数据采集子系统包括传感器接口模块、网络爬虫模块和数据库连接模块,分别用于连接传感器获取原始数据、从互联网抓取数据以及与数据库建立连接抽取数据;

3.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述数据转换子系统包括数据标准化模块、数据编码模块和特征工程模块,以实现数据的标准化、编码和特征构建;

4.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述并行计算子系统包括并行计算框架模块和内存计算模块,以支持并行计算任务的调度和高效计算;

5.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述结果展示子系统包括可视化模块和报告生成模块,以直观展示分析结果并生成报告。

6.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述人工智能增强子系统的深度学习模型训练模块利用深度神经网络进行数据特征自动学习和提取,强化学习策略优化模块通过与环境交互优化处理策略,包括深度学习模型训练模块和强化学习策略优化模块。

7.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述区块链集成子系统的数据溯源模块利用区块链不可篡改特性确保数据可追溯,智能合约执行模块实现自动化规则执行和权限管理,包括数据溯源模块和智能合约执行模块。

8.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述边缘计算子系统用于将计算和数据处理能力推向数据源附近的网络边缘,包括边缘数据预处理模块和边缘数据预处理模块;

9.如权利要求1所述一种基于大数据算法的并行预处理分析系统,其特征在于,所述隐私保护子系统用于确保数据在处理和分析过程中个人隐私不被泄露,包括同态加密计算模块和差分隐私模块。

10.一种用于权利要求1至9任一所述系统的基于大数据算法的并行预处理分析方法,其特征在于,包括以下步骤:


技术总结
本发明提供一种基于大数据算法的并行预处理分析系统及应用方法,涉及数据处理与分析技术领域,包括基础子系统和新技术子系统,其中,基础子系统包括数据采集子系统、数据清洗子系统、数据转换子系统、数据分发子系统、并行计算子系统、数据分析子系统、结果展示子系统,新技术子系统包括人工智能增强子系统、区块链集成子系统、边缘计算子系统、量子计算接口子系统、隐私保护子系统,通过并行计算子系统和数据分发子系统,能够同时处理大规模的数据,大大缩短了数据处理的时间,提高了整体工作效率,将数据转换为适合分析的格式,为后续的分析提供高质量的数据基础,数据分析子系统能够运用多种分析方法,发现数据中的隐藏模式、关联和趋势。

技术研发人员:陈刚,田羽,陈俊,周雄斌,汪大磊
受保护的技术使用者:武汉众邦银行股份有限公司
技术研发日:
技术公布日:2024/11/26
文档序号 : 【 40123679 】

技术研发人员:陈刚,田羽,陈俊,周雄斌,汪大磊
技术所有人:武汉众邦银行股份有限公司

备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
陈刚田羽陈俊周雄斌汪大磊武汉众邦银行股份有限公司
一种基于图像智能分类的城市内涝积水深度识别方法 一种用于制造化妆品瓶的玻璃模具的制备方法与流程
相关内容