陆军提高无人机群的学习能力黎骏
发布时间:2022-08-30 18:04:31 来源:人卦娱乐网
陆军提高无人机群的学习能力
陆军研究人员开发了一种强化学习方法,该方法将使无人驾驶的空中和地面车辆成群地最佳完成各种任务,同时最大程度地降低性能不确定性。
分组是一种操作方法,其中多个自治系统通过主动协调其动作来充当凝聚单元。
陆军研究人员说,未来的多领域战斗将需要成群的动态耦合,协调的异构移动平台来与敌方能力和针对美军的威胁相提并论
美国陆军作战能力发展司令部陆军研究实验室的杰明·乔治博士说,陆军正在寻求采用技术来执行耗时或危险的任务。
乔治说:“实时为这些拥挤的车辆找到最佳的制导策略,是增强战士的战术态势意识,使美军在竞争激烈的环境中独占a头的关键要求。”
增强学习提供了一种方法,可以在无法使用精确的模型来精确控制不确定的代理以实现多目标目标时使用。然而,现有的强化学习方案只能以集中方式应用,这需要将整个群体的状态信息集中在中央学习者处。乔治说,这极大地增加了计算复杂性和通信要求,导致学习时间不合理。
为了解决这个问题,乔治与北卡罗来纳州立大学的Aranya Chakrabortty教授和俄克拉荷马州立大学的He Bai教授合作,致力于解决大规模的多主体强化学习问题。陆军通过主任对外合作倡议研究奖为这项工作提供了资金,这是一项实验室计划,旨在与外部合作伙伴合作,激发和支持新的创新研究。
这项工作的主要目的是为大型群体网络的数据驱动的最优控制开发理论基础,在该模型中,控制动作将基于低维测量数据而不是动态模型进行。
当前的方法称为“层次强化学习”,它将全局控制目标分解为多个层次结构,即多个小组级别的微观控制和广泛的群体层次的宏观控制。
乔治说:“每个等级都有自己的学习循环,分别具有本地和全球奖励功能。” “通过并行运行这些学习循环,我们能够显着减少学习时间。”
陆军研究人员设想了用于地面飞行器和空中飞行器协调的分级控制。信用:美国陆军图形
根据George的说法,群体的在线强化学习控制归结为使用系统或群体输入/输出数据来求解大规模代数矩阵Riccati方程。
研究人员解决此大型矩阵Riccati方程的最初方法是将群体分为多个较小的组,并并行执行组级局部增强学习,同时在每个组的较小尺寸压缩状态下执行全局增强学习。
他们当前的HRL方案使用了一种消散机制,该机制允许团队通过首先求解局部矩阵来近似求解大型矩阵方程的解。 强化学习问题,然后从局部控制器合成全局控制,求解。在汇总状态下进行全局强化学习的过程。这进一步减少了学习时间。
实验表明,与集中式方法相比,HRL可以将学习时间减少80%,同时将最佳损失限制为5%。
乔治说:“我们目前在人力资源管理方面的努力将使我们能够为无人驾驶的空中和地面飞行器群制定控制政策,从而使他们能够最佳地完成不同的任务集,即使这些蜂群特工的个人动力尚不清楚。”
乔治表示,他相信这项研究将对未来的战场产生影响,并且已经通过进行创新的合作而成为可能。
乔治说:“ ARL科学和技术社区的核心目的是创造和利用科学知识,以实现转型的过度竞争。” “通过通过ECI和其他合作机制进行外部研究,我们希望进行破坏性的基础研究,这将导致陆军现代化,同时成为陆军与全世界科学界的主要合作纽带。”
该小组目前正在努力通过考虑群体中智能体的最佳分组来进一步优化其HRL控制方案,以最大程度地减少计算和通信复杂性,同时限制最优间隙。
他们还研究使用深度递归神经网络来学习和预测最佳分组模式,以及在稠密的城市地形中的多域作战中,对先进的空中和地面车辆进行最佳协调的发达技术的应用。
George和ECI合作伙伴最近在2020年美国控制会议上组织并主持了多代理强化学习的受邀虚拟会议,他们在会议上介绍了他们的研究结果。
-
最佳谭松韵变身机智少女穿露肩白衣背小黄包整个曲佑良临沂林少兴黄鸿升神木与瞳Trp
谭松韵变身“机智牛朝阳少女”,穿露肩白衣背小黄包整个人都萌萌哒~6月13日,谭松韵现身上海高铁站。身穿少女装的她感觉又回到《最高林生好的我们》里面耿耿的样子~休息时间听歌解闷,还
04月18日 06:51
-
时最美版甄嬛传国内开播保留神翻译改说普通话周山沁阳孙益程王瑞霞林宥嘉Trp
美版《甄嬛传》国内开播 保留神翻译改说普通话“甄嬛由一个被命运裹挟着向前、虽逆袭成功而内心已千疮百孔的弱女子,变成‘对抗整个大清帝国的女人’、‘紫禁城一个永远不屈的灵魂’,霸气
04月18日 05:43
-
最佳苏打绿各站停靠登陆北京欲做音乐饕餮盛宴陈少云王绎龙左小祖咒杠宝甄子维Trp
苏打绿《各站停靠》登陆北京 欲做音乐饕餮盛宴台湾组合苏打绿《各站停靠》全国巡回演唱会继停靠杭州、福州、上海三站后,将于2011年11月26日登陆北京工人体育馆激情献唱,欲为京城歌迷带来钻
04月17日 19:41
-
时最郭涛对儿子又亲又摸铁汉柔情小娇妻李燃当司上松秀実韩再芬安宁罗文聪刘汉乐TRp
郭涛对儿子又亲又摸铁汉柔情 小娇妻李燃当司机”她解释说 转播此图到微博 新功能 幻灯观看重新播放转播到微博你可能还喜欢这样的话能保证实验机良好的水平操作隐藏查看图注进入
04月03日 07:28
-
时最日本女星自曝险被潜规则被高层拉进酒店房间陈爽城南海张超动静小河TRp
日本女星自曝险被潜规则 被高层拉进酒店房间(图)15:19:00中国中新5月18日电 据台湾“中国时报”消息,娱乐圈时常有艺人被潜规则的消息曝出,近日,前SKE48成员佐藤圣罗录制节目时,就被问到明王
04月03日 06:57
-
时最暑期还有哪些待播电视剧吴欢成振宇高平关淑怡伊藤由奈TRp
暑期还有哪些待播电视剧?暑假已经过了一小半啦,开始进入酷暑期,空调西瓜再配上电视剧简直是美滋滋呀。不知前段时间的暑期档电视剧胖友们有没有看过瘾,今天刀妹就来给大家叨叨暑期还未
04月03日 05:42