北航团队大模型驱动无人机成果国际领先

北航团队大模型驱动无人机成果国际领先

引用

光明网

1.

https://difang.gmw.cn/gd/2024-05/27/content_37346782.htm

北京航空航天大学周尧明教授团队在无人机智能决策领域取得重大突破，其研发的"大模型驱动无人机具身智能决策系统"及配套的"指控盒"设备，不仅在技术上处于国际领先地位，还在实际应用中展现出显著优势。

团队核心骨干成员赵浩然介绍，无人机的具身智能决策对于其突发态势应对、故障后应急方案生成和异构多无人机系统的有效协同具有重要意义。团队所研发的具身智能体,可以利用传感器感知周围环境,作出决策,然后使用执行器采取行动,进行无人机的控制及操作。团队所开发的系统基于大模型对多模态数据的理解能力,将真实物理世界的照片、声音、无人机状态数据等多源信息融合作为智能体的感知,将对于真实世界的执行器的操作作为智能体的行为。同时,提出了一套“智能体具象化为大脑,控制器具象化为小脑”的控制架构,智能体作为大脑这一决策生成器,专注于生成高层级的行为,控制器作为小脑这一运动控制单元,专注于将高层级的行为(如期望目标点)转换成低层级的系统命令(如旋翼转速)。

同时,团队携带该技术的应用载体“指控盒”进行应用场景案例的展示,该指控盒在无人机上装载即可赋予无人机“大脑”的功能,进行自主的指控、决策与协同。

据悉,该方案可以使目前的巡检方案中误报率从80%降低到10%,消防灭火场景中应急响应能力从分钟级降低到秒级,大规模救援场景如地震救援中指控无人机的能力从一人一机提高到一人百机,目前在巡检、应急、救援等方面给当前无人机行业带来技术变革,处于国际领先地位。