随着第六代移动通信技术不断发展，低轨道卫星网络凭借覆盖范围广、传播时延低等优势，已成为我国构建空天地一体化信息网络的重要基础设施。然而，低轨道卫星网络存在拓扑结构随时间快速变化、链路容量有限、业务负载动态波动等特性，传统基于静态拓扑或全局网络状态的路由方法难以及时适应复杂网络环境，易导致网络拥塞和传输时延增加等问题。因此，如何在高动态变化的卫星组网环境中，实现高效、稳定的路径选择与资源调度，成为当前卫星通信领域亟待解决的关键问题。
近日，中国科学院上海高等研究院等研究团队，聚焦星地融合网络多路径路由实时选择问题，提出了基于元强化学习的多智能体协同技术，实现了在动态卫星网络环境下的高效路径选择与自适应路由优化。
研究团队围绕动态卫星网络环境下，长距离复杂端到端路径选择与时延优化问题展开了系统研究，针对现有路由方法在低轨卫星网络中存在的网络链路拥塞波动、策略收敛速度慢等关键挑战，首次在多智能体强化学习框架中引入了元学习思想，并提出基于元强化学习的多智能体近端策略优化的多路径选择方法。该方法将星地融合网络中多源多目的通信问题，建模为分布式部分可观测马尔可夫决策过程，并通过跨任务经验，共享学习具有良好泛化能力的策略初始化模型，使算法在新的网络场景中可实现快速适配与稳定优化。
研究团队进一步在算法设计上，基于K最短路径算法生成候选路由集合，结合链路队列长度、传输时延等网络状态构建局部观测维度，并通过联合考虑端到端时延与链路拥塞程度的奖励函数，引导智能体形成兼顾低时延与负载均衡的路由选择策略。仿真实验结果表明，在96颗卫星组成的Walker星座网络场景下，该方法较传统路由算法和其他强化学习方法，在平均端到端时延方面至少降低5%，并在不同服务时间条件下保持零丢包率，策略收敛速度明显提升，展现出良好的稳定性与适应能力。
该研究在理论上实现了元强化学习与卫星网络路由机制的有效融合，也在复杂动态网络环境中展现出较强的鲁棒性和可扩展性，为未来大规模卫星互联网中的智能路由与资源调度提供了新的技术思路，对提升空间信息网络的通信效率和服务质量具有重要意义。
相关研究成果发表在《IEEE物联网期刊》（IEEE Internet of Things Journal）上。研究工作得到国家自然科学基金委员会、科学技术部、上海市的支持。
论文链接
基于元强化学习的星地融合网络多智能体协同技术流程示意图
不同分组服务时延条件下，所提技术与基线算法在平均端到端时延（左图）和丢包率（右图）方面的性能对比
工业菌种是生物制造的重要竞争力。研究微生物底盘并发现与目标产品生产相关的高效功能元件是工业菌种领域的研究热点。谷氨酸棒杆菌是氨基酸工业生产的主力菌。而谷氨酸棒杆菌基因组约50%的基因功能尚不明晰，功 新华网北京11月14日电 今日，教育部举办新闻发布会， 教育部职业教育与成人教育司司长彭斌柏介绍了我国职业教育改革发展的总体情况。彭斌柏介绍，党的十八大以来，在以习近平同志为核心的党中央坚强 中国教育报-中国教育新闻网11月13日讯（记者 王家源）今天，在北京市东城区史家胡同小学召开的北京市中小学劳动教育推进会暨东城区劳动教育工作现场会上，北京市教委、北京教科院发布《北京市中小学 ◎摘 要 高校作为统筹推进教育科技人才体制机制一体改革的先行区和试验田，要以更高的政治站位、更强的使命担当、更远的战略眼光深入实施人才强校战略。坚持党管人才，健全统一高效的人才工作 中国教育报-中国教育新闻网讯（记者 徐德明 通讯员 孙敬 纪宏宇）记者近日从天津市滨海新区教育体育局获悉，天津滨海职业学院代表队在2024年世界职业院校技能大赛总决赛争夺赛“建设工程数字化计 党的十八大以来，天津市委、市政府深入学习贯彻习近平总书记关于教育的重要论述，全面落实党中央、国务院决策部署和全国教育大会精神，坚守为党育人、为国育才的初心使命，教育强市建设取得积极进展 。本文链接：星地融合网络多智能体协同技术研究取得进展http://www.sushuapos.com/show-12-2749-0.html
声明：本网站为非营利性网站，本网页内容由互联网博主自发贡献，不代表本站观点，本站不承担任何法律责任。天上不会到馅饼，请大家谨防诈骗！若有侵权等问题请及时与本网联系，我们将在第一时间删除处理。
上一篇： 植物抗逆与生长发育调控研究取得进展
下一篇： 科学家构建细胞合成基因新线路