一种数据处理系统、方法及计算机系统与流程
技术特征:
1.一种数据处理系统,其特征在于,包括处理板和内存扩展板;
2.根据权利要求1所述的数据处理系统,其特征在于,所述处理板还包括第二控制器,用于建立所述存储组件与服务器主机的地址空间之间的第二映射关系,并转发所述服务器主机发送的、符合所述第二映射关系的第一主机访问请求;
3.根据权利要求2所述的数据处理系统,其特征在于,所述处理板还包括系统总线,用于将所述内部访问请求转发至所述第一控制器,和/或将所述第一主机访问请求转发至所述第一控制器。
4.根据权利要求1所述的数据处理系统,其特征在于,所述处理核心具体用于生成内部访问请求,通过桥接驱动线程识别存储组件,并建立所述处理板的地址空间与所述存储组件的物理地址之间的第一映射关系,转发目的地址与所述第一映射关系匹配的内部访问请求,丢弃所述目的地址与所述第一映射关系不匹配的内部访问请求。
5.根据权利要求1所述的数据处理系统,其特征在于,所述处理板还包括至少一个计算核心,用于生成与当前计算需求对应的第二内部访问请求;所述内部访问请求还包括所述第二内部访问请求。
6.根据权利要求1所述的数据处理系统,其特征在于,所述内存扩展板还包括监测管理模块,用于检测所述内存扩展板的运行状态。
7.根据权利要求1-6任意一项所述的数据处理系统,其特征在于,所述控制组件包括:
8.根据权利要求7所述的数据处理系统,其特征在于,所述分析处理模块包括第一硬核模块,用于基于接收到的扩展访问请求的访问地址和访问类型生成并输出第一内存访问请求;所述目标内存访问请求包括所述第一内存访问请求;
9.根据权利要求8所述的数据处理系统,其特征在于,所述分析处理模块还包括第二硬核模块,用于基于接收到的第二主机访问请求的访问地址和访问类型生成并输出第二内存访问请求;所述当前访问请求还包括服务器主机发送的所述第二主机访问请求,所述目标内存访问请求还包括所述第二内存访问请求;
10.根据权利要求9所述的数据处理系统,其特征在于,所述分析处理模块还包括:
11.根据权利要求10所述的数据处理系统,其特征在于,所述分析处理模块还包括访问仲裁模块,用于对接收到的所述第一内存访问请求和/或所述第二内存访问请求和/或所述第三内存访问请求进行仲裁,并输出仲裁成功的目标内存访问请求。
12.根据权利要求10所述的数据处理系统,其特征在于,所述内存扩展板还包括与所述网络接口模块连接的网络光模块,用于接收远端计算节点发送的所述远程访问请求。
13.根据权利要求7所述的数据处理系统,其特征在于,所述控制组件还包括控制寄存器模块,用于对所述内存控制模块和所述分析处理模块中的寄存器进行管理。
14.根据权利要求7所述的数据处理系统,其特征在于,所述存储组件包括非易失性存储设备;
15.根据权利要求14所述的数据处理系统,其特征在于,所述存储组件还包括内存颗粒;
16.根据权利要求15所述的数据处理系统,其特征在于,所述缓存控制器还用于响应于所述访问信息中的访问类型为写操作类型,转发所述访问信息;
17.根据权利要求15所述的数据处理系统,其特征在于,所述存储控制器具体用于基于所述缓存控制器发送的访问信息中的访问地址确定包括所述访问地址的读取地址范围,按所述读取地址范围在所述非易失性存储设备中读取待缓存数据并返回;
18.根据权利要求17所述的数据处理系统,其特征在于,所述内存访问控制器还用于将所述响应数据返回至所述共享内存控制器,以便通过所述共享内存控制器将所述响应数据返回至所述目标内存访问请求的发送方;所述发送方为服务器主机或所述处理板或远程计算节点。
19.一种计算机系统,其特征在于,包括服务器主机以及如权利要求1-18任意一项所述的数据处理系统。
20.一种数据处理方法,其特征在于,应用于如权利要求1-18任意一项所述的数据处理系统,所述数据处理系统包括处理板和设有存储组件的内存扩展板,所述数据处理方法包括:
技术总结
本发明公开了一种数据处理系统、方法及计算机系统,涉及计算机系统领域,为解决访问扩展内存的访问路径长、访问延时大的问题,该数据处理系统包括处理板和内存扩展板,处理板上设有处理核心、第一控制器,内存扩展板上设有存储组件和控制组件。本发明能够使处理板可以对内存扩展板上的存储组件直接进行访问,而无需通过服务器主机进行内存拷贝,降低了处理板访问扩展内存时和服务器主机之间的耦合度,在有效扩展了处理板的内存的同时,缩短了处理板对扩展内存的访问路径,降低了访问延时,从而减小了预训练模型训练过程中的通信瓶颈。
技术研发人员:张静东,王江为,郝锐,王彦伟,肖麟阁,徐冉
受保护的技术使用者:浪潮电子信息产业股份有限公司
技术研发日:
技术公布日:2024/12/2
技术研发人员:张静东,王江为,郝锐,王彦伟,肖麟阁,徐冉
技术所有人:浪潮电子信息产业股份有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
