一种基于强化学习的网络流量负载均衡控制方法专利登记公告

专利名称：一种基于强化学习的网络流量负载均衡控制方法

摘要：本发明公开了一种基于强化学习的网络流量负载均衡控制方法，包括以下步骤：1)数据包处在路由器节点R*时，根据当前数据包的状态量s和策略π从下一跳的动作集合选择回报值最大的动作ai；2)当前数据包被路由以后，根据该数据包的实际情况修改该数据包的状态量s；并更新当前数据包的下一跳的动作集合；3)根据当前网络流量均衡状态修改当前数据包的奖惩值r；4)根据奖惩值更新策略π；重复步骤1)到步骤4)，直到当前数据包达到最终目的地址。该方法通过智能体与网络环境不断的交互学习，实现网络流量负载均衡的最优或近似最优控制。

专利类型：发明专利

专利号：CN201110447514.8

专利申请（专利权）人：广东电网公司电力科学研究院

专利发明（设计）人：胡朝辉;梁智强;梁志宏;周强峰;江泽鑫;石炜君;梁毅成

主权项：一种基于强化学习的网络流量负载均衡控制方法，其特征在于包括以下步骤：1)、数据包处在路由器节点R*时，根据当前数据包的状态量s和策略π从下一跳的动作集合选择回报值最大的动作ai，并将数据包发送到动作ai对应的路由器；2)、当前数据包被路由以后，根据该数据包的实际情况修改该数据包的状态量s；并更新当前数据包的下一跳的动作集合；所述状态量s包括路由距离xi和流量均衡量yi；所述路由距离xi是指：选择链路i后，下一跳地址距离目的地址的最短矢量距离；流量均衡量yi是指：链路i上的当前流量占链路饱和流量的比例；3)

专利地区：广东