写在纸上的1.6M个框:AGC-Drive的技术雄心与未竟的开放之路
在通往L5级完全自动驾驶的道路上一条技术路线日益清晰——让车辆“学会合作”。V2V车-车与V2I车-路协同感知已经证明共享感知信息能够有效破解单车的遮挡问题。然而这些协同范式依然局限于地面层面无论是车辆还是路侧单元都只能从一个近似二维的平面去观察世界。街角后突然冲出的来车、楼宇间穿行的行人、百米开外的障碍物——这些依然是地面视角无法逾越的物理盲区。破局的答案或许一直悬停在天空之上。无人机拥有无与伦比的鸟瞰视角与六自由度机动性能够从物理层面消除地面传感器的视野盲区。然而在AGC-Drive之前真实世界、大规模、多模态的V2U协同感知数据集几乎不存在。仿真环境无法模拟真实世界中复杂的遮挡关系、传感器噪声和动态交通流导致在仿真数据上训练出的模型在真实道路部署时性能急剧下滑。2025年12月NeurIPS会议上一篇题为《AGC-Drive: A Large-Scale Dataset for Real-World Aerial-Ground Collaboration in Driving Scenarios》的论文正式亮相。标题中的“Large-Scale”和“Real-World”两个词让台下从事空地协同感知的研究者眼前一亮——这是第一个宣称覆盖真实城市道路、包含两辆地面车和一架无人机同步采集的大规模V2U数据集。“数据已经整理完毕很快将通过GitHub发布。”台上的报告者指向了GitHub链接语气笃定。OpenReview页面上白纸黑字地写着数据集和代码可在 https://github.com/PercepX/AGC-Drive 获取百度网盘也提供了备用链接甚至附上了提取密码。一切看起来都很完整。研究者们带着期待离开会场——他们等待的是一个能真正推动空地协同3D感知研究的真实世界数据宝库。但时至今日那个GitHub仓库里依然空空如也。百度网盘链接也已失效。与此同时另一种技术路线正在NeurIPS 2026的在投论文中悄然成形。上海科技大学团队提出的CrossGeo提供了一套可无限扩展的全球三视角数据生成方法理论上能够产出任意规模的带像素级深度和6自由度姿态的卫星-无人机-地面图像——而且它即将开源。AGC-Drive的技术设计本身没有问题1.6M个标注框、13类物体、400个场景这些数字是实打实写进论文的。但一个无法被访问的数据集对学术社区来说究竟是一份贡献还是一纸空文当“数据集论文”的核心资产被锁在内部服务器上我们该如何评估它的学术价值而CrossGeo所代表的“方法论文”范式是否真的能解决数据开放的顽疾——毕竟它也尚未开源本文将深度拆解AGC-Drive的技术内核逐项分析其传感器配置、时空同步、标注流程、基准设计等技术细节在此基础上系统讨论“未开源的数据集论文”的伦理与价值困境最后客观对比CrossGeo的“可扩展数据生成”范式分析其优势与尚未兑现的开放承诺并对未来趋势做出审慎判断。Part 1AGC-Drive的技术深度拆解——它承诺了什么1. 研究动机为什么需要空地协同V2V还不够吗在深入技术细节之前有必要先厘清AGC-Drive试图解决的根本问题。V2V协同感知已经被广泛研究其核心思想是让相邻车辆共享各自的感知结果或中间特征从而扩展单车视野。但AGC-Drive论文敏锐地指出V2V在密集交通流、复杂十字路口和长距离感知场景中表现高度不稳定。原因在于所有地面车辆的视角仍然处于同一水平面附近当一个目标被大型车辆或建筑物完全遮挡时无论多少辆地面车都无法“看穿”遮挡物——因为所有视线方向都与遮挡表面近乎平行。无人机提供了完全不同的解决方案一个悬停在50—80米高度的无人机其视线几乎垂直向下建筑物、树木等遮挡物变成了可以从上方绕过的“小障碍”。这种“上帝视角”从物理层面消除了遮挡问题。然而空地协同面临三个独特挑战1视角差异巨大地面看到的是物体侧面无人机看到的是顶部2尺度剧烈变化同一物体在地面图像中可能占数百像素在无人机图像中仅占数十像素3传感器异构地面常用多线LiDAR如128线无人机受载重限制常用32线或单线LiDAR。AGC-Drive正是为了提供真实世界中这些挑战的数据基础而设计的。2. 数据集构建一场精密的多智能体同步工程2.1 传感器配置两车一机的异构协同AGC-Drive的采集平台由两辆地面车辆和一架无人机组成是目前公开文献中配置最复杂的V2U采集系统之一。平台LiDAR相机其他传感器地面车辆1128线机械LiDAR360°5×RGB多焦距覆盖前后左右GPS/IMU地面车辆2128线机械LiDAR360°5×RGB同配置GPS/IMU无人机32线机械LiDAR前向倾斜安装1×RGB前向GPS/IMU两辆地面车辆的128线LiDAR提供稠密的三维点云探测距离约200米垂直视场−25°至15°测距误差控制在±2厘米以内。5个相机的多焦距设计意味着不同相机针对不同距离优化广角镜头覆盖近距盲区长焦镜头捕捉远距细节。这种配置在地面协同感知数据集中也属少见。无人机的32线LiDAR相较于地面车辆的128线点云密度显著降低约1/4这恰恰模拟了真实V2U部署中的异构传感器场景。无人机相机为前向RGB而非下视意味着它采集的是倾斜视角约30°俯角而非严格的天底视角。这一设计更贴近无人机在跟随车辆时“观察前方道路”的实际任务需求。2.2 时空同步厘米级、毫秒级的严苛要求时空同步是协同采集的核心难点。AGC-Drive论文报告了以下技术方案时间同步所有传感器通过GPS-PPS脉冲-per-second信号进行硬同步时间误差控制在1毫秒以内。这比V2U4Real的20ms要求更为严格主要是因为两辆地面车辆之间也需要同步且无人机与地面之间的相对运动更快。空间标定通过多传感器联合标定LiDAR-相机、车-无人机获得各传感器到车体/无人机本体系的外参。车与无人机之间的相对位姿通过GPS-RTK实时差分定位获得精度达到厘米级。多模态点云配准论文还描述了一个额外的后处理步骤利用地面的128线点云和无人机的32线点云进行ICP迭代最近点精细配准进一步消除残余误差。论文报告配准后的平均点对距离误差小于5厘米。2.3 数据规模两个版本哪个才是“最终版”AGC-Drive存在两个公开发布的数据量统计分别来自arXiv预印本2025年6月和NeurIPS正式论文2025年12月数据来源LiDAR帧数图像数3D标注框场景数物体类别动态事件占比arXiv版 (2025年6月)~120K~440K~1.6M4001319.5%NeurIPS版 (2025年12月)~80K~360K~720K3501317%两个版本之间的差异是显著的NeurIPS版的标注框数量不足arXiv版的一半。论文中没有解释这一缩减的原因。可能的原因包括1arXiv版包含了自动标注的伪标签而NeurIPS版只保留了人工精校的标注2数据集在提交前进行了更严格的质量过滤剔除了部分质量不达标的帧3仅是不同分割策略导致的统计口径变化。无论原因为何这种前后不一致给社区带来了困惑——如果数据集最终开源研究者该以哪个版本为准在场景多样性上AGC-Drive覆盖了14种驾驶场景包括城市环岛、高速公路隧道、匝道、十字路口、居民区等。19.5%arXiv版的数据包含动态交互事件如车辆切入/切出、频繁变道、行人横穿等。这一比例远高于V2U4Real后者主要为静态或匀速运动场景对算法在真实复杂交通流中的鲁棒性评估具有重要意义。13类物体的细粒度标注包括轿车、SUV、卡车、公交车、摩托车、自行车、行人、交通锥、栅栏、路标、灯杆、建筑物、植被。相比之下V2U4Real只标注了车辆、骑行者、行人和卡车四类。因此AGC-Drive在类别粒度上具有明显优势。2.4 标注流程1.6M个3D框是如何诞生的AGC-Drive的标注工程是论文中最耗人力的部分。根据论文描述标注流程如下预标注使用预训练的3D检测模型可能是基于Waymo或nuScenes预训练的PointPillars或CenterPoint对点云数据进行自动标注生成初始3D框。人工精修由20名专业标注员使用商用标注工具论文未具体说明工具名称对自动标注结果进行逐帧修正包括调整框的位置、尺寸、朝向以及修正类别标签。交叉校验每帧数据由至少两名标注员独立标注然后通过加权投票机制合并。存在分歧的帧被送入第三轮仲裁。跨平台一致性标注同一物体出现在地面车辆A、地面车辆B和无人机三个平台的点云中时需要赋予相同的实例ID。这是协同感知任务的关键——模型必须学会关联来自不同平台的同一物体。论文报告了跨平台ID关联的自动化算法但未给出具体的匹配精度指标。标注质量论文报告了人工标注的3D框与LiDAR真实点云之间的平均IoU为0.92对于车辆类表明标注质量较高。但需要指出的是这个质量评估是在内部验证集上进行的由于数据集未开放外部无法复现。3. 方法学基准V2V与V2U协同感知的标准化评测为了验证数据集的可用性AGC-Drive设立了两种协同感知基准并报告了多个基线模型的结果。3.1 协同感知的三种融合策略按照协同感知领域的标准分类法融合策略分为三个层级其技术区别如下表融合层级操作方式通信量优点缺点早融合直接拼接原始点云极高MB级信息无损带宽需求大异构传感器直接拼接效果差中间特征融合交换BEV空间的特征张量适中0.2MB级精度-带宽平衡需要设计统一的特征空间晚融合交换检测结果框置信度极低KB级带宽友好丢失了原始几何信息AGC-Drive在评估中采用了OpenCOOD开源框架实现了这三种融合策略的可复现比较。3.2 任务一车辆对车辆V2V协同3D检测输入两辆地面车辆的点云各128线LiDAR输出统一坐标系下的3D检测框评估指标平均精度APIoU0.5和IoU0.7通信模拟理想同步无延迟和异步随机通信延迟0-200ms论文报告的基线模型结果APIoU0.5融合方式代表方法AP0.5通信开销单车基线No Fusion取两车中较好者68.2%0晚融合Late Fusion72.5%极低中间特征融合V2VNet76.8%适中早融合Early Fusion74.1%高结论中间特征融合在V2V任务上最优这与OPV2V等合成数据集上的结论一致。但需要注意的是AGC-Drive是真实数据其绝对精度数字76.8%显著低于OPV2V上的同类模型通常85%反映了真实世界噪声对性能的负面影响。3.3 任务二车辆对无人机V2U协同3D检测输入一辆地面车的128线点云 无人机的32线点云其余设置同V2V任务论文报告的基线结果以V2VNet为例APIoU0.5配置全距离AP50-100m远距离AP单车地面检测62.3%18.7%V2U协同Late Fusion70.1%29.4%V2U协同Intermediate Fusion73.5%34.2%关键发现在50-100米的远距离区域V2U协同相比单车检测的增益约为15.5个百分点从18.7%到34.2%这与V2U4Real报告的结果15.54%→30.20%趋势一致。但AGC-Drive的绝对数字略高可能源于其无人机搭载32线LiDARV2U4Real的无人机为单线旋转LiDAR点云密度更高。3.4 任务三协同3D目标跟踪论文还报告了协同3D跟踪的基线结果使用SORT跟踪器作为基础模块配置AMOTAMT稳定跟住轨迹率ML轨迹丢失率单车14.2%31.7%48.6%V2U协同26.5%64.2%20.3%跟踪性能的提升幅度AMOTA从14.2%到26.5%提升约86%甚至大于检测任务进一步验证了无人机视角对ID连续性的关键作用。核心问题这些基线结果由于数据集未开放目前无法被第三方独立验证。论文中的数字是“声称”的性能而不是“可复现”的性能。这对于以“建立基准”为核心使命的数据集论文来说是一个严重的缺憾。Part 2数据集开放的伦理困境——没有开源的数据集论文有价值吗2.1 数据集论文的特殊性在计算机视觉和机器人领域数据集论文是一个独特的类别。与算法论文不同算法论文即使不开源代码读者仍然可以通过数学描述和伪代码理解其核心思想并自行实现。但数据集论文的核心产出是数据本身——一组经过精心采集、标注、对齐的多模态传感器记录。如果没有数据论文就只剩下“我们做了这件事”的元描述无法被其他人用于训练或评估模型。因此数据集论文的学术价值与数据的可触及性直接挂钩。一个无法被访问的数据集其价值趋近于零。这并非苛刻的评价而是学术研究的朴素逻辑科学知识需要被共享和检验。2.2 AGC-Drive的承诺与现实AGC-Drive在论文中明确写道“The dataset and code are available at https://github.com/PercepX/AGC-Drive.”这是白纸黑字的公开承诺。然而截至2026年6月该仓库仍然只有README文件没有任何数据下载链接或代码。论文中提供的百度网盘链接也已失效。为什么会出现这种情况可能的原因包括隐私与合规问题真实道路采集的数据包含行人面部、车牌等敏感信息脱敏处理模糊化或擦除可能需要额外的法律审批流程。存储与带宽成本数TB级的数据集需要稳定的托管服务这对于研究团队来说可能是一笔不小的开销。内部管理失误负责开源的团队成员可能已经毕业或离职交接工作未完成。无论原因如何结果是一样的学术社区被剥夺了本应属于公共领域的研究资源。2.3 学术信任的损耗AGC-Drive并非孤例。在数据集的开放历史中有太多“即将发布”最终变成“永不发布”的案例。每一次承诺的落空都会消耗学术社区对数据提供方的信任。当研究者下次读到“数据已公开”的声明时他们很可能会多一分怀疑。这种信任损耗的后果是真正愿意开放数据的研究团队也会因为前人留下的“狼来了”效应而受到不公平的质疑。CrossGeo的“即将开源”之所以被社区谨慎看待恰恰反映了这种普遍焦虑——即使CrossGeo的方法论再优雅只要数据没有真正上线它和AGC-Drive在“开放”这一维度上并无本质区别。Part 3CrossGeo的替代范式——可无限扩展的数据生成方法当学术界等待AGC-Drive的兑现时另一群研究者选择了完全不同的路径。上海科技大学团队在NeurIPS 2026在投论文中提出了CrossGeo一个覆盖全球五大洲85个场景、27.8万张图像的三视角数据集并同时提供了一个可无限扩展的数据生成方法论。3.1 两种数据哲学采集 vs 生成AGC-Drive代表的是“真实采集”范式投入大量资源进行实地数据采集和人工标注产出高质量的语义感知数据集3D边界框。这种范式的优势是数据的真实性和语义丰富性劣势是成本高昂、扩展困难、开放受限于法律和行政障碍。CrossGeo代表的是“数据生成”范式利用已有的全球摄影测量3D网格通过自动化的SfMMVS管线生成像素级的几何标注深度6DoF位姿理论上可以无限扩展。这种范式的优势是可扩展性、标注的完美性几何真值是精确的不需要人工估计劣势是合成数据与真实数据之间存在域漂移Sim2Real gap且目前只提供RGB几何标注没有语义类别标签。3.2 CrossGeo的核心方法论CrossGeo的设计哲学是以无人机为“桥梁视角”连接卫星与地面形成一个“采集→重建→标注→赋能”的闭环系统。其四步生成管线如下步骤操作关键输入输出自动化程度1. 数据采集在全球场景中并行采集卫星、无人机、地面三视角RGB图像商业卫星影像、无人机航拍、地面图像三视图RAW图像半自动2. 三维重建利用SfMMVS对无人机地面图像进行联合重建多视角RGB图像空间重叠三维点云相机6自由度姿态全自动3. 深度生成将三维点云投影回每一帧图像三维点云相机姿态密集深度图metric depth全自动4. 卫星对齐将三维点云与相机姿态对齐至卫星图块坐标系重建结果卫星影像带6-DoF姿态深度信息的卫星标注全自动可无限扩展的含义一旦某个区域的卫星影像和少量无人机/地面图像被采集并通过SfM重建出3D网格就可以在该网格上生成任意数量的虚拟相机轨迹渲染出无限多的合成视图且每一帧都自带完美的深度和位姿。这类似于在数字孪生中“飞行”而不需要在真实世界中重复飞行。3.3 CrossGeo与AGC-Drive的定位差异两者并非直接竞争关系而是服务于不同的下游任务维度AGC-DriveCrossGeo任务类型语义感知3D检测、跟踪几何重建深度估计、定位标注类型3D边界框目标级像素级深度 6DoF位姿数据来源真实LiDAR相机实地采集真实RGB SfM生成几何可扩展性极低每次扩展需重新采集标注极高算法自动生成开放性承诺未兑现链接失效即将开源尚未实现CrossGeo的优势在于它为几何任务提供了近乎无限的训练数据且标注是“免费”的。但它无法替代AGC-Drive这样的真实语义数据集——因为语义类别信息无法从SfM重建中自动获得除非额外训练一个语义分割模型。3.4 客观评价CrossGeo尚未开源承诺仍是承诺必须坦诚地指出CrossGeo目前也尚未正式开源。论文处于NeurIPS 2026在投阶段团队表示将在录用后开源。但“即将开源”与“已经开源”之间存在着实质性的差距。学术界见过太多“录用后开源”最终不了了之的案例。因此在“开放”这一维度上CrossGeo和AGC-Drive目前处于同样的状态承诺存在数据缺席。区别在于AGC-Drive的承诺已经过去超过半年且论文中的链接失效情况更为严重。CrossGeo的承诺是“未来的”尚未到兑现期限社区应给予合理的时间窗口进行监督。CrossGeo的方法论优势在于它不依赖于昂贵的实地采集和人工标注因此理论上更容易兑现开放承诺——因为它不需要处理隐私脱敏、法律授权等问题所有输入是公开的卫星影像和可公开获取的无人机/地面图像。然而理论上的容易并不等于实践中的必然。CrossGeo最终能否真正开源仍然取决于团队的实际行动。结语承诺的价值在于兑现AGC-Drive的技术设计堪称精湛两车一机的异构传感器配置、1.6M个细粒度3D标注框、14种驾驶场景、19.5%的动态事件占比——如果这些数据能够如期开放它无疑将成为空地协同感知领域的里程碑。但学术研究建立在信任与检验的基础之上。一篇数据集论文的核心贡献是数据而不是描述数据的文字。当数据集缺席时论文就变成了一份“预告片”而不是一部“作品”。我们可以欣赏它的技术构思却无法基于它推进自己的研究。CrossGeo提供了一条不同的路径用自动化的方法生成带完美几何标注的数据理论上可以无限扩展。这种“方法优先于数据”的范式天然更适应开放科学的要求——因为一旦方法公开任何人都可以复现和扩展。但方法的开放不等于数据的开放CrossGeo的“即将开源”同样需要被社区持续监督。对于读者来说面对一篇数据集论文最应该问的问题不是“它有多大、有多新”而是“它在哪里可以下载”如果答案指向一个空链接那么这篇论文的学术价值就应该被重新审视。对于作者来说最应该恪守的原则是不要在论文中写下你做不到的承诺。一个数据集是否值得发表应该以它是否真正可用为前提而不是以“我们计划开放”为前提。当AGC-Drive的GitHub仓库还是一片空白时我们只能等待。而当CrossGeo的代码和数据真正上线时我们才能说一种更可持续的范式已经到来。在此之前所有的“即将”都只是希望而不是事实。