买专利卖专利找龙图腾,真高效! 查专利查商标用IPTOP,全免费!专利年费监控用IP管家,真方便!
摘要:本发明提供一种工业互联网消息中间件的消息智能分发方法。本发明通过对工业消息中间件环境进行精准特征提取,显著提升模型训练效率,能够根据工业互联网用户多样化的消息发送请求、实时反馈和环境变化动态调整分发策略,提升智能消息分发方法在复杂多变工业环境中的高效、精准分发,实现最小化通道资源利用率,最大化提升工业消息中间件服务平台运营效益,并最小化消息积压量。相比于其他消息分发方案,能够自动适应环境变化和业务需求的变化,通过自我学习和优化,确保工业消息中间件能够持续提供高效、准确的消息分发服务。
主权项:1.一种工业互联网消息中间件的消息智能分发方法,其特征在于,包括以下步骤:(1)采用图神经网络交叉提取通道资源供给侧和工业消息请求侧的特征,给出图,为具有通道资源特征的节点集合,为具有工业消息请求特征的节点集合,定义参数代表具有维度的通道资源特征向量,定义参数代表维度的工业消息用户请求特征向量,同时定义图神经网络的隐藏层参数和,其中为通道资源特征节点卷积的第个隐藏层,为工业消息用户特征节点卷积的第个隐藏层;(2)初始化Actor网络的策略参数和Critic网络的权重系数和学习率参数,并接受来自图神经网络输出的通道资源特征和工业消息用户特征,此处假设图神经网络的第层是输出层;(3)接受初始工业消息用户请求和运营商通道资源状态作为输入,使用Actor网络生成初始通道资源分发的动作概率分布,并选择动作概率最大值作为Actor网络输出的动作;(4)根据Actor网络输出的动作,将动作输入到工业消息中间件环境中,获取环境下一时刻的状态和对应的奖励;(5)使用Critic网络估计当前状态值或状态-动作值;(6)利用TD误差值更新Critic网络的权重参数,更新公式为,其中是学习率,为的梯度;(7)使用TD误差计算优势函数,其中是在策略下,从状态采取动作所能获得的期望回报,基准函数表示在该状态下所有可能动作的平均表现或某个基准值;(8)使用REINFORCE算法的策略梯度公式,即,计算Actor网络的梯度,其中为最大化的工业消息智能分发的目标函数,通常表示下获得的期望回报,为策略的参数,表示t时刻的期望,表示对参数的梯度,表示策略在状态下选择动作的对数概率;(9)使用更新公式来更新Actor网络的参数;(10)将状态更新为下一状态,并返回步骤(2);(11)经过多轮迭代,当Actor和Critic网络的权重参数和学习率参数不在变化时,A2C网络趋于最优状态时,则结束上述迭代训练过程。
全文数据:
权利要求:
百度查询: 北京金楼世纪科技有限公司 一种工业互联网消息中间件的消息智能分发方法
免责声明
1、本报告根据公开、合法渠道获得相关数据和信息,力求客观、公正,但并不保证数据的最终完整性和准确性。
2、报告中的分析和结论仅反映本公司于发布本报告当日的职业理解,仅供参考使用,不能作为本公司承担任何法律责任的依据或者凭证。