一种基于强化学习的车载自组网路由方法与流程
技术特征:
1.一种基于强化学习的车载自组网路由方法,其特征在于,包括:
2.根据权利要求1所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述分层路由框架,包括:
3.根据权利要求2所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述将数据包转发到通信条件最好的道路上,包括:
4.根据权利要求1所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述拥塞控制机制,包括:
5.根据权利要求1所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述q学习算法,包括:
6.根据权利要求5所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述多维q表为三维矩阵,包括当前交叉路口、目标交叉路口和动作,分别用i、d和a表示;所述q值表示为表示在当前交叉口处采取行动的到达目的地交叉口dk的q值;其中,表示将数据包转发到一个路段的动作,r∈{east,west,south,north}。
7.根据权利要求3所述的一种基于强化学习的车载自组网路由方法,其特征在于,代理将q表分配给交叉路口的路测单元rsu;
8.根据权利要求6所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述多维q表通过如下公式进行更新迭代:
9.根据权利要求1所述的一种基于强化学习的车载自组网路由方法,其特征在于,在源点车辆和目的地车辆所在的道路的两端,各有候选的两个交叉路口;
10.根据权利要求4所述的一种基于强化学习的车载自组网路由方法,其特征在于,所述引入了拥塞控制机制,通过实时监控连接状态,一旦网络拥堵,将选择一个替代路段,包括:
技术总结
本发明公开了一种基于强化学习的车载自组网路由方法,涉及计算机网络的应用技术领域,包括:设计分层路由框架,将基于Q学习算法的路由路径规划和基于位置算法的中继器选择相结合,将数据包转发到通信条件最好的道路上,然后在道路上选择最合适的中继器;通过Q学习算法计算一个多维Q表来实现任意两个交叉点之间的路由路径选择,代理根据多维Q表进行路由决策;引入了拥塞控制机制,通过实时监控连接状态,一旦网络拥堵,将选择一个替代路段。本发明,具有较低的开销和延迟,还大大减少了状态的数量,使算法易于实现。
技术研发人员:王洪鹏,刘湘德,黄旭岑,熊键,陈鸣,于翔,罗俊,薛滔,袁磊,吕笑冲
受保护的技术使用者:中国电子科技集团公司第二十九研究所
技术研发日:
技术公布日:2024/12/5
文档序号 :
【 40238912 】
技术研发人员:王洪鹏,刘湘德,黄旭岑,熊键,陈鸣,于翔,罗俊,薛滔,袁磊,吕笑冲
技术所有人:中国电子科技集团公司第二十九研究所
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
技术研发人员:王洪鹏,刘湘德,黄旭岑,熊键,陈鸣,于翔,罗俊,薛滔,袁磊,吕笑冲
技术所有人:中国电子科技集团公司第二十九研究所
备 注:该技术已申请专利,仅供学习研究,如用于商业用途,请联系技术所有人。
声 明 :此信息收集于网络,如果你是此专利的发明人不想本网站收录此信息请联系我们,我们会在第一时间删除
