跳至正文
RFL_GLOBAL
EN
  • SIM-CARLAAIR // W7
  • Python 实现
  • ANIMA

SIM-CARLAAIR

一个仿真器,统御空地协同

训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)。要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。

模块状态: 生产就绪

工作流覆盖

5

部门
通用
波次
W7
领域
通用
第7波 // ANIMA 套件
基础层 — SIM-CARLAAIR
SIM-CARLAAIR // W7 // 006/012
01核心挑战

我们解决的问题

训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)。要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。

自主系统团队可在统一的仿真环境中迭代空地联合 AI 策略——消除集成开销,并支持真实测试无法安全复现的多域训练场景。

02解决方案

SIM-CARLAAIR 提供什么

SIM-CARLAAIR(代号:Ryujin)封装了 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合到同一个共享的 Unreal Engine 进程中,并提供统一的 Python API。

能力

  • 封装 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合进同一 Unreal Engine 进程,提供统一 Python API
  • 五个开箱即用的工作流,覆盖精准降落、VLN/VLA 评估、大规模数据集采集、跨视角感知基准测试与 RL 环境实例化
  • 三个自研 CUDA 内核让坐标变换提速 18.6 倍、多视角合成提速 40.8 倍。
03工程挑战

为什么这很难

构建 SIM-CARLAAIR 需要解决多个耦合问题:

  1. 01训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)
  2. 02要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。
  3. 03封装 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合进同一 Unreal Engine 进程,提供统一 Python API
  4. 04五个开箱即用的工作流,覆盖精准降落、VLN/VLA 评估、大规模数据集采集、跨视角感知基准测试与 RL 环境实例化

SIM-CARLAAIR 通过精心的架构设计和严格的验证来解决这些问题。

04性能基准

用数据说话

关键性能指标:

用数据说话
指标数值
工作流覆盖5 个开箱即用的任务配置(精准降落、VLN/VLA、数据集、跨视角、RL)
CUDA 加速相较 CPU 基线,坐标变换快 18.6 倍;多视角合成快 40.8 倍
集成接口63 话题 ROS2 桥接 + FastAPI 服务——可接入任意自主技术栈
防务价值空地联合任务演练、多域 AI 训练、反无人机传感器融合开发
05构建状态

已构建的功能

已完成 2/4 个组件
已构建的功能
组件状态说明
工作流覆盖已完成5 个开箱即用的任务配置(精准降落、VLN/VLA、数据集、跨视角、RL)
CUDA 加速已完成坐标变换快 18.6 倍;多视角合成比 CPU 基线快 40.8 倍
集成接口进行中63 话题 ROS2 桥接 + FastAPI 服务——可接入任意自主技术栈
防务价值进行中空地联合任务演练、多域 AI 训练、反无人机传感器融合开发
06应用场景

SIM-CARLAAIR 部署场景

  • APP_01

    自主系统

    自主系统团队可在统一的仿真环境中迭代空地联合 AI 策略——消除集成开销,并支持真实测试无法安全复现的多域训练场景。

  • APP_02

    研究实验室

    SIM-CARLAAIR(代号:Ryujin)封装了 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、机载传感器、多旋翼物理)融合进同一个共享的 Unreal Engine 进程,并提供统一的 Python API。

  • APP_03

    边缘计算

    在同一个 Unreal Engine 进程中融合无人机与地面车辆仿真——坐标变换提速 18.6 倍,63 话题 ROS2 桥接,零配置摩擦。