它要解决什么问题
dense BEV 计算开销大。能不能用稀疏的候选目标 query 达到同等检测效果、但更省算力。
机制拆解
- 用 sparse object query 表示候选 3D 目标,而不是铺满整个 BEV 空间
- deformable 4D aggregation 聚合多视角、多时刻特征
- 利用时序信息改善动态目标检测,可扩展到 3D tracking
量产判断
读完应该能问
- 我们的感知方案是 dense 还是 sparse?算力预算里感知占多少?
感知背景
Sparse4D: Multi-view 3D Object Detection with Sparse Spatial-Temporal Fusion
稀疏 query 换效率
arXiv 2211.10581 ↗dense BEV 计算开销大。能不能用稀疏的候选目标 query 达到同等检测效果、但更省算力。