数据传输方法和装置、计算机程序产品、电子设备与流程

所属的技术人员能够理解,本公开的各个方面可以实现为系统、方法或程序产品。因此,本公开的各个方面可以具体实现为以下形式,即:完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等),或硬件和软件方面结合的实施方式,这里可以统称为“电路”、“模块”或“系统”。下面参照图10来描述根据本公开的这种实施方式的电子设备1000。图10显示的电子设备1000仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。如图10所示,电子设备1000以通用计算设备的形式表现。电子设备1000的组件可以包括但不限于:上述至少一个处理单元1010、上述至少一个存储单元1020、连接不同系统组件(包括存储单元1020和处理单元1010)的总线1030以及显示单元1040。其中,所述存储单元存储有程序代码,所述程序代码可以被所述处理单元1010执行,使得所述处理单元1010执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。例如,所述处理单元1010可以执行如图1中所示的步骤s110:获取待传输数据的数据大小,根据所述数据大小对第一协议中的保留位进行赋值得到第三协议、对第二协议中的保留位进行赋值得到第四协议;s120:根据所述数据大小确定与所述待传输数据对应的流量类型,根据所述流量类型设置显示拥塞通知值;s130:基于所述第三协议以及所述第四协议将与所述待传输数据对应的连接请求以及所述显示拥塞通知值发送至交换机,以使所述交换机根据所述第三协议以及所述第四协议对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值;s140:接收所述目标显示拥塞通知值,根据所述目标显示拥塞通知值对所述待传输数据的传输速率进行调整。存储单元1020可以包括易失性存储单元形式的可读介质,例如随机存取存储单元(ram)10201和/或高速缓存存储单元10202,还可以进一步包括只读存储单元(rom)10203。存储单元1020还可以包括具有一组(至少一个)程序模块10205的程序/实用工具10204,这样的程序模块10205包括但不限于:操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。总线1030可以为表示几类总线结构中的一种或多种,包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。电子设备1000也可以与一个或多个外部设备1100(例如键盘、指向设备、蓝牙设备等)通信,还可与一个或者多个使得用户能与该电子设备1000交互的设备通信,和/或与使得该电子设备1000能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口1050进行。并且,电子设备1000还可以通过网络适配器1060与一个或者多个网络(例如局域网(lan),广域网(wan)和/或公共网络,例如因特网)通信。如图所示,网络适配器1060通过总线1030与电子设备1000的其它模块通信。应当明白,尽管图中未示出,可以结合电子设备1000使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的示例实施方式可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据本公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是cd-rom,u盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施方式的方法。在本公开的示例性实施例中,还提供了一种计算机可读存储介质,其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中,本公开的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。根据本公开的实施方式的用于实现上述方法的程序产品,其可以采用便携式紧凑盘只读存储器(cd-rom)并包括程序代码,并可以在终端设备,例如个人电脑上运行。然而,本公开的程序产品不限于此,在本文件中,可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了可读程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质,该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于无线、有线、光缆、rf等等,或者上述的任意合适的组合。可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如java、c++等,还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(lan)或广域网(wan),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。此外,上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本技术旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
背景技术:
1、在大规模的高性能无损网络中,为了对不同种类的流量进行区别管理,使用了traffic control(业务量控制)和pfc(priority flow control,优先级流控制)优先级等配置。这些机制确保关键应用程序在网络拥塞时能够获得足够的带宽和低延迟,从而保证服务质量。
2、但是,由于交换机受限于内存大小无法缓存全量流信息,以及根据数据传输时延要求不能通过复杂逻辑来判断流的大小类型,交换机只能将同一优先级的大小流量混合缓存,时延敏感的小流和带宽敏感的大流相互作用,更频繁导致拥塞信号产生,数据发送端会根据拥塞信号降低数据传输速率,导致带宽利用率下降,数据传输时延升高。
3、因此,需要提供一种新的数据传输方法。
4、需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
技术实现思路
1、本公开的目的在于提供一种数据传输方法、数据传输装置、计算机程序产品以及电子设备,进而至少在一定程度上克服由于相关技术的限制和缺陷而导致的带宽利用率下降,数据传输时延升高的问题。
2、根据本公开的一个方面,提供一种数据传输方法,包括:
3、获取待传输数据的数据大小,根据所述数据大小对第一协议中的保留位进行赋值得到第三协议、对第二协议中的保留位进行赋值得到第四协议;
4、根据所述数据大小确定与所述待传输数据对应的流量类型,根据所述流量类型设置显示拥塞通知值;
5、基于所述第三协议以及所述第四协议将与所述待传输数据对应的连接请求以及所述显示拥塞通知值发送至交换机,以使所述交换机根据所述第三协议以及所述第四协议对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值;
6、接收所述目标显示拥塞通知值,根据所述目标显示拥塞通知值对所述待传输数据的传输速率进行调整。
7、在本公开的一种示例性实施例中,所述根据所述数据大小对第一协议中的保留位进行赋值得到第三协议,包括:
8、根据所述数据大小对数据传输所使用的ip协议的保留位进行赋值,将所述保留位的值设置为1,得到所述第三协议。
9、在本公开的一种示例性实施例中,所述对第二协议中的保留位进行赋值得到第四协议,包括:
10、当所述数据大小大于预设值时,将所述数据大小修改为所述预设值,根据所述预设值对rdma协议栈的基本传输头部中的保留位进行赋值,得到所述第四协议;其中,所述保留位的值与所述预设值相等;
11、当所述数据大小不大于所述预设值时,根据所述数据大小对所述rdma协议栈的基本传输头部中的保留位进行赋值,得到所述第四协议;其中,所述保留位的值与所述数据大小相等。
12、在本公开的一种示例性实施例中,所述根据所述数据大小确定与所述待传输数据对应的流量类型,根据所述流量类型设置显示拥塞通知值,包括:
13、确定与所述待传输数据对应的数据中心,根据所述数据中心的数据流分布,确定与所述待传输数据对应的流量类型;其中,所述流量类型为第一流量类型或者第二流量类型;
14、根据所述第一流量类型或者所述第二流量类型设置显示拥塞通知值。在本公开的一种示例性实施例中,提取与发送所述连接请求对应的第三协议中的保留位,包括:
15、获取用户数据报协议中的目的端口号,根据所述目的端口号确定传输待传输数据的流量是否为基于rdma的流量;
16、当是时,提取所述第三协议中的保留位以及所述第四协议中的保留位;
17、当不是时,将所述显示拥塞通知值发送至接收端,以使接收端将所述显示拥塞通知值回传至发送端,发送端根据所述显示拥塞通知值对传输速率进行调整。
18、在本公开的一种示例性实施例中,提取第四协议中的保留位,并对所述第四协议中的保留位进行解析,得到待传输数据的数据大小,包括:
19、当所述第三协议中的保留位为1时,提取所述第四协议中的保留位;
20、对所述第四协议中的保留位的值进行转换,将转换得到的值确定为所述待传输数据的数据大小。
21、在本公开的一种示例性实施例中,获取显示拥塞通知配置值,根据所述数据大小以及所述显示拥塞通知配置值,对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值,包括:
22、获取缓冲区深度以及显示拥塞通知配置值;
23、根据所述数据大小、所述缓冲区深度以及所述显示拥塞通知配置值对所述显示拥塞通知值进行修改,得到所述目标显示拥塞通知值。
24、根据本公开的一个方面,提供一种数据传输方法,包括:
25、接收发送端发送的连接请求以及显示拥塞通知值,提取与发送所述连接请求对应的第三协议中的保留位;
26、当所述第三协议中的保留位满足要求时,提取第四协议中的保留位,并对所述第四协议中的保留位进行解析,得到待传输数据的数据大小;
27、获取显示拥塞通知配置值,根据所述数据大小以及所述显示拥塞通知配置值,对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值,并将所述目标显示拥塞通知值发送至接收端,以使接收端将所述目标显示拥塞通知值回传至所述发送端,所述发送端根据所述目标显示拥塞通知值调整所述待传输数据的传输速率。
28、根据本公开的一个方面,提供一种数据传输装置,包括:
29、协议赋值模块,用于获取待传输数据的数据大小,根据所述数据大小对第一协议中的保留位进行赋值得到第三协议、对第二协议中的保留位进行赋值得到第四协议;
30、拥塞通知设置模块,用于根据所述数据大小确定与所述待传输数据对应的流量类型,根据所述流量类型设置显示拥塞通知值;
31、拥塞通知修改模块,用于基于所述第三协议以及所述第四协议将与所述待传输数据对应的连接请求以及所述显示拥塞通知值发送至交换机,以使所述交换机根据所述第三协议以及所述第四协议对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值;
32、传输速率调整模块,用于接收所述目标显示拥塞通知值,根据所述目标显示拥塞通知值对所述待传输数据的传输速率进行调整。
33、根据本公开的一个方面,提供一种数据传输装置,包括:
34、保留位提取模块,用于接收发送端发送的连接请求以及显示拥塞通知值,提取与发送所述连接请求对应的第三协议中的保留位;
35、数据大小确定模块,用于当所述第三协议中的保留位满足要求时,提取第四协议中的保留位,并对所述第四协议中的保留位进行解析,得到待传输数据的数据大小;
36、拥塞通知发送模块,用于获取显示拥塞通知配置值,根据所述数据大小以及所述显示拥塞通知配置值,对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值,并将所述目标显示拥塞通知值发送至接收端,以使接收端将所述目标显示拥塞通知值回传至所述发送端,所述发送端根据所述目标显示拥塞通知值调整所述待传输数据的传输速率。
37、根据本公开的一个方面,提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现上述任一示例性实施例所述的数据传输方法。
38、根据本公开的一个方面,提供一种电子设备,包括:
39、处理器;以及存储器,用于存储所述处理器的可执行指令;其中,所述处理器配置为经由执行所述可执行指令来执行上述任一示例性实施例所述的数据传输方法。
40、本公开实施例提供的一种数据传输方法,获取待传输数据的数据大小,根据所述数据大小对第一协议中的保留位进行赋值得到第三协议、对第二协议中的保留位进行赋值得到第四协议;根据所述数据大小确定与所述待传输数据对应的流量类型,根据所述流量类型设置显示拥塞通知值;基于所述第三协议以及所述第四协议将与所述待传输数据对应的连接请求以及所述显示拥塞通知值发送至交换机,以使所述交换机根据所述第三协议以及所述第四协议对所述显示拥塞通知值进行修改,得到目标显示拥塞通知值;接收所述目标显示拥塞通知值,根据所述目标显示拥塞通知值对所述待传输数据的传输速率进行调整。第一方面,获取待传输数据的数据大小,根据待传输数据的大小对第一协议中的保留位进行赋值得到第三协议,对第二协议中的保留位进行赋值得到第四协议,基于第三协议、第四协议对待传输数据进行传输,实现了对现有传输协议的复用,不存在使用以及部署的成本和代价;第二方面,在确定待传输数据的数据大小之后,根据数据大小确定与待传输数据的数据包对应的流量类型,根据流量类型设置显示拥塞通知值,并将该显示拥塞通知值发送至交换机,通过显示拥塞通知对流量进行打标签,因此,交换机不需要使用额外内存空间记录流量以及流量类型,避免了因为交换机缓存空间有限而导致的效率下降问题;第三方面,当交换机接收到显示拥塞通知值之后,可以对显示拥塞通知值进行修改,得到目标显示拥塞通知值,其中,交换机通过对显示拥塞通知值进行判断进而进行修改,使得交换机cpu和内存花费时间最少,极大减少了对交换机的压力,提高了网络传输效率;第四方面,接收目标显示拥塞通知,根据目标显示拥塞通知值对待传输数据的传输速率进行差异控制,确保网络中的负载均衡,提升了整体网络的性能和可靠性。
41、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
技术研发人员:田源,陈映,王子潇,车碧瑶
技术所有人:中国电信股份有限公司
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
