近日,第二届中国空间智能大会在湖北武汉举办。大会设置多场分论坛活动,“大规模空间智能3D数据开放计划发布暨座谈会”于会议期间举行。该计划由影溯科技发起,联合高校、科研院所及产业方等二十余家机构,共建百万级3D/4D场景公共数据底座与统一评测体系,补齐国内空间智能领域的数据短板。

空间智能,是人工智能对接物理世界的基础能力。它支持智能体感知三维环境,完成理解、推理与交互,是具身机器人、自动驾驶、AR/VR、工业仿真等技术的重要底层支撑。
参会专家介绍,二维视觉领域,ImageNet数据集推动了图像识别技术快速迭代。反观3D方向,行业长期面临数据供给不足的问题。现有公开数据集普遍存在场景有限、动态样本少、标注口径不统一的情况,制约空间智能大模型训练与算法公平对比,也延缓技术从实验室走向实际应用的进程。
据计划发起人、浙江大学教授、影溯科技创始人章国锋介绍,这项计划定位为空间智能领域的公共基础设施项目。计划中的百万级3D、4D场景,并非一次性对外放出百万个场景数据。项目会先明确合格场景的判定标准,把几何质量、时间序列信息、元数据、授权状态纳入考核。只有通过质量检测的场景,才计入有效统计规模。项目设置明确的时间节点,半年内开放首批数据集;一年完善评测Benchmark体系;两年完成百万级高质量3D/4D场景数据集建设,并推进相关行业标准研究工作。
据介绍,数据来源分为三条路径。第一,利用重建生成技术,把互联网公开的图片、视频升维转换为3D/4D场景,扩大场景覆盖广度。第二,产业合作方实地采集真实场景数据,保留物理世界的真实细节。第三,通过仿真合成,生成现实中难以采集的极端、长尾场景样本。三类数据相互补充,不做单一依赖。
活动现场,影溯科技分别与禾赛科技、云深处科技完成合作签约。禾赛科技提供高精度实景空间采集能力,输出毫米级精度三维场景数据;影溯科技负责多源数据标定、资产化处理、质检,接入评测平台。双方打通从真实世界采集、三维重建到模型训练的闭环,模型运行的失败案例,还会反向指导下一轮的数据采集工作。云深处科技将把工业、能源巡检、应急作业的机器人实操场景反馈带入项目,用真实作业环境检验数据集的实用性。不鸣科技、影眸科技、穹彻智能等企业也从游戏仿真资产、3D生成模型、分布式机器人数据采集等角度参与共建。

针对为何要启动该计划,章国锋表示,空间智能已经从单点算法验证,进入大模型训练和产业落地阶段,数据决定模型能力的上限。互联网上有海量二维图文素材,但原生高质量3D公开数据十分稀缺。这项工作无法依靠单一企业或者高校完成,需要产学研多方协同共建数据与评测体系,形成数据迭代闭环。

二维图片视频、纯仿真数据已经大量存在,为什么还需要大规模真实3D、4D数据。禾赛科技Kosmo业务负责人皮紫威解释,二维素材很难提供可靠的绝对尺度与完整深度信息。仿真数据可以生成小概率场景(仿真合成补足小概率场景),但和真实世界的光照、噪声、物体交互效果仍存在差距。真实3D、4D数据提供物理世界的可信锚点。三类数据各有价值,互相配合使用,而不是三选一的关系。
项目设置分级开放机制,开放不等于无条件无限制使用。数据权限划分为公开展示、科研使用、商业使用三个层级。每一批开放数据集附带来源溯源、授权说明。人脸、关键设施等敏感内容会做脱敏、降精度处理。科研用途和商业用途采用不同使用协议,明确使用边界,规避版权、隐私风险。
不同参与主体有着清晰分工。高校、科研院所主要负责技术架构、标注规范、评测方法设计,保障项目的科学性。传感器、数据企业承担实景数据生产、工具链开发,解决数据稳定产出的问题。场景应用企业可以输出真实业务需求,检验数据集能不能真正解决产业痛点。后续拟组建空间智能数据和标准联盟,设立理事会、秘书处,以及技术、标准、产业应用专项工作组。重要版本公开留痕,技术问题依靠实验复现判断,产业效果由真实任务验证,避免单一主体主导全部规则制定。
针对发起方企业公共项目与商业目标如何平衡,章国锋说,公共部分与商业部分边界会做清晰划分。共建的数据底座、基础评测工具向行业开放,降低全行业研发门槛。企业的商业价值来源于数据处理技术、重建生成模型、面向行业的定制服务,而不是占有共建公共资产。行业整体技术成熟、市场做大,参与企业都可以从中找到商业机会,二者并不冲突。
普通公众暂时不会直接接触这套数据集,但可以感受技术落地带来的改变。参会专家介绍,依托这套数据训练优化后的机器人,可更好完成电站巡检、灾害现场作业;自动驾驶系统应对长尾路况能力得到提升;AR、数字内容生产的效率也有望改善。
据了解,首批样例Demo已经上线项目官方页面。首期数据集计划在今年第三、第四季度分阶段对外释放。高校课题组、企业、开发者均可提交申请参与共建,项目参与入口、完整审核细则后续将通过官方渠道对外发布。




