- OV-Seg Indoor // 2507.23134
- GPU
- WAVE 6
FREYA
发现者
FREYA使用基于3D跟踪的提案和Alpha-CLIP对室内场景执行开放词汇3D实例分割。给定文本提示如'找到所有灭火器',它分割场景中的每个3D实例,为每个匹配提供精确的空间边界。搜救、设施检查和室内安防都需要在3D空间中找到特定物体——FREYA实现带精确边界的文本提示3D搜索,使得在复杂室内环境中定位任何描述的物体成为可能。
模块状态: 开发中状态
TEXT
- 部门
- ANIMA
- 波次
- W6
- 领域
- 场景智能
- 第6波 // ANIMA 套件
- 智能层 — 3D开放词汇分割
FREYA // W6 // 025/079
01核心挑战
智能层 — 3D开放词汇分割
文本提示的室内场景3D实例分割。
该模块解决了ANIMA感知和智能堆栈中的关键缺口。
02解决方案
FREYA 提供什么
文本提示的室内场景3D实例分割。
能力
- 先进的3D开放词汇分割能力
- 集成到ANIMA感知堆栈
- 双语文档
- 生产就绪架构
03工程挑战
为什么这很难
构建 FREYA 需要解决多个耦合问题:
- 01在边缘硬件上实现实时性能
- 02在多样条件下保持精度
- 03与现有ANIMA模块无缝集成
- 04在退化环境中鲁棒运行
FREYA 通过精心的架构设计和严格的验证来解决这些问题。
04性能基准
用数据说话
关键指标:
| 指标 | 数值 |
|---|---|
| 状态 | 开发中 |
| 后端 | GPU |
| 集成 | ANIMA堆栈 |
| 论文 | OV-Seg Indoor |
05构建状态
已构建的功能
已完成 3/6 个组件
| 组件 | 状态 | 说明 |
|---|---|---|
| 核心架构 | 已完成 | 已验证 |
| 训练管线 | 已完成 | 就绪 |
| 集成 | 进行中 | ANIMA堆栈 |
| 边缘部署 | 进行中 | 优化 |
| 核心模型 | 已完成 | 生产验证 |
| API层 | 进行中 | REST API |
06应用场景
FREYA 部署场景
- APP_01
机器人
自主机器人系统核心模块。
- APP_02
国防
军事和安全应用。
- APP_03
研究
学术和工业研究平台。
07技术
底层技术
基础:OV-SEG INDOOR
- 先进的3D开放词汇分割能力
- 集成到ANIMA感知堆栈
- 双语文档
核心创新
文本提示的室内场景3D实例分割。
部署
- REST API
- Docker容器化
- Prometheus指标
- 可配置后端
计算
- 主要
- GPU
- 边缘
- 优化推理
- API
- REST + 流式
08论文
论文
- [01]OV-Seg Indoor(2507.23134)