- SIM-CARLAAIR // W7
- Python 实现
- ANIMA
SIM-CARLAAIR
一个仿真器,统御空地协同
训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)。要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。
模块状态: 生产就绪工作流覆盖
5
- 部门
- 通用
- 波次
- W7
- 领域
- 通用
- 第7波 // ANIMA 套件
- 基础层 — SIM-CARLAAIR
我们解决的问题
训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)。要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。
自主系统团队可在统一的仿真环境中迭代空地联合 AI 策略——消除集成开销,并支持真实测试无法安全复现的多域训练场景。
SIM-CARLAAIR 提供什么
SIM-CARLAAIR(代号:Ryujin)封装了 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合到同一个共享的 Unreal Engine 进程中,并提供统一的 Python API。
能力
- 封装 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合进同一 Unreal Engine 进程,提供统一 Python API
- 五个开箱即用的工作流,覆盖精准降落、VLN/VLA 评估、大规模数据集采集、跨视角感知基准测试与 RL 环境实例化
- 三个自研 CUDA 内核让坐标变换提速 18.6 倍、多视角合成提速 40.8 倍。
为什么这很难
构建 SIM-CARLAAIR 需要解决多个耦合问题:
- 01训练和验证空地联合作战的自主系统,需要两套完全独立的仿真生态:地面车辆仿真器(CARLA、Gazebo)与 UAV 仿真器(AirSim、Flightmare)
- 02要把二者桥接到跨域场景——无人机护航车队、地面引导 UAV 精准降落、多域数据集采集——就得依赖脆弱的进程间胶水代码,每次版本更新都会出问题。
- 03封装 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、航空传感器、多旋翼物理)融合进同一 Unreal Engine 进程,提供统一 Python API
- 04五个开箱即用的工作流,覆盖精准降落、VLN/VLA 评估、大规模数据集采集、跨视角感知基准测试与 RL 环境实例化
SIM-CARLAAIR 通过精心的架构设计和严格的验证来解决这些问题。
用数据说话
关键性能指标:
| 指标 | 数值 |
|---|---|
| 工作流覆盖 | 5 个开箱即用的任务配置(精准降落、VLN/VLA、数据集、跨视角、RL) |
| CUDA 加速 | 相较 CPU 基线,坐标变换快 18.6 倍;多视角合成快 40.8 倍 |
| 集成接口 | 63 话题 ROS2 桥接 + FastAPI 服务——可接入任意自主技术栈 |
| 防务价值 | 空地联合任务演练、多域 AI 训练、反无人机传感器融合开发 |
已构建的功能
| 组件 | 状态 | 说明 |
|---|---|---|
| 工作流覆盖 | 已完成 | 5 个开箱即用的任务配置(精准降落、VLN/VLA、数据集、跨视角、RL) |
| CUDA 加速 | 已完成 | 坐标变换快 18.6 倍;多视角合成比 CPU 基线快 40.8 倍 |
| 集成接口 | 进行中 | 63 话题 ROS2 桥接 + FastAPI 服务——可接入任意自主技术栈 |
| 防务价值 | 进行中 | 空地联合任务演练、多域 AI 训练、反无人机传感器融合开发 |
SIM-CARLAAIR 部署场景
- APP_01
自主系统
自主系统团队可在统一的仿真环境中迭代空地联合 AI 策略——消除集成开销,并支持真实测试无法安全复现的多域训练场景。
- APP_02
研究实验室
SIM-CARLAAIR(代号:Ryujin)封装了 CARLA-Air(arXiv:2603.28032),将 CARLA(地面车辆、行人、交通管理)与 AirSim(无人机、机载传感器、多旋翼物理)融合进同一个共享的 Unreal Engine 进程,并提供统一的 Python API。
- APP_03
边缘计算
在同一个 Unreal Engine 进程中融合无人机与地面车辆仿真——坐标变换提速 18.6 倍,63 话题 ROS2 桥接,零配置摩擦。