更多精彩 >

知天下3DGS社区开源世界模型基模Explorer1.3B

2026-10-14 20:04:56    来源:36氪  作者: 

摘要:知天下3DGS社区开源世界模型基模Explorer1.3B

2026年9月,知天下 AI(海外署名 ExplorerAI,主体为知天下(苏州)人工智能科技有限公司开放其生成式高斯基模 Explorer 1.3B的权重文件、测试代码、及高质量测试数据集,供全球研究者下载实测。知天下使用NVIDIA公司 ArtiFixer架构,用八千GPU小时训练了Explorer,并在四类真实场景的未观测视角生成表现上超越ArtiFixer。知天下由此判断:海量高质量原生3D数据训练,将持续提升世界模型的能力和规模;Scaling Law不但适用于一维的文字和二维的图片视频,也适用于三维立体世界。

一、空间想象力

当一个成年人去往世界任意一个地点,稍微走几步路环顾周围,脑海里都会自然浮现出四周的立体结构。哪怕是只能看到物体的正面,也能想象出它的侧面和背面视角大约什么样。这是我们从婴儿到成年不断探索世界所锻炼出的能力:空间想象力。通过世界模型,机器也将能想象立体世界:从有限的可见视角,想象出任意一个未见的角度。

知天下本次发布的基模,侧重空间想象力。输入 12 张正面照片及相机内外参、覆盖上中下三个拍摄高度,让基模去想象场景的侧面和背面,并用实拍画面作为 Ground Truth 逐帧评估。使用了上海的中国航海博物馆代表室内场景,苏州的西交利物浦大学校园代表室外地面场景,河北金山岭长城代表空中俯瞰场景,苏州阳澄数谷代表空中平视场景。结果表明:室内物体、空中俯瞰、空中平视三类场景 Explorer 超越ArtiFixer,而在地面平视场景双方效果持平。下面是实测对比截图:

上海的中国航海博物馆室内

从左到右:12 张正面照片3DGS 重建 | NVIDIA ArtiFixer 1.3B 想象侧后方视角| 知天下 Explorer 1.3B  想象侧后方视角| 实拍真实侧后方 Ground Truth

空中俯瞰河北承德金山岭长城

从左到右:12 张正面照片3DGS 重建 | NVIDIA ArtiFixer 1.3B 想象侧面视角| 知天下 Explorer 1.3B  想象侧面视角| 实拍真实侧面 Ground Truth

全量对比Explorer 和Artifixer的参数权重,前者更新量为 1.61% 。为什么如此小的更新量级导致了极其显著的能力提升?

原因是参数权重的更新高度集中在DiT架构中的邻视图投影(47%)、相机条件(21%)、透明度条件(14%)三个立体视觉模块。邻视图投影矩阵决定了立体像对信息的计算,相机条件矩阵决定了立体世界投影到平面,透明度条件矩阵决定了立体世界里不同距离的前景、中景、远景是如何被分别想象出来的。

是什么让Explorer 成为了在室内、地面、空中全场景中都能稳定输出的基模?

二、原生3D数据

知天下认为,基模算法已经平权,真正决定基模能力上限的是训练数据在多样性、代表性、完整度与画质。3D生成式基模的算法路线会持续迭代,高质量数据却能复用于每一代算法——这是知天下眼中长久的复利。然而,3D生成式基模需要用环绕无死角多高度海量视角的数据来训练,称为真实世界原生3D数据集。过往的互联网APP当中并不存在这类数据的积累。

NVIDIA在训练Artifixer基模时,使用了开源业界最大的真实世界原生3D数据集:DL3DV-10K。其中99%是由大学生们手持手机用超广角模式(13~15毫米焦距)在大学和城市设施之间拍摄的视频轨迹数据,1%是无人机航拍轨迹数据。场景、视角、设备与光照单一,视频抽帧普遍带有运动模糊,这正是其空中与室内新未观测视角生成能力偏弱的数据根源。

图为DL3DV-10K的数据采集方法,99%数据集仅有人行视角。

知天下在训练Explorer基模时,使用了其高斯泼溅社区里顶尖艺术家们采集的高质量环绕数据集,范围覆盖中国各地,从地面到空中,从室内到室外,从白天到黑夜,采集设备包括无人机、微单相机、运动相机、全景相机、各型号手机等。

图为知天下3DGS社区高质量数据集的采集案例,融合了地面和空中视角多高度环绕。

多样的拍摄轨迹、优质的图像素材、丰富的拍摄地点,大幅度提升了知天下基模的邻视图投影矩阵。

品类繁多的摄影器材,大幅度提升了知天下基模的相机条件矩阵。

从近在咫尺的博物馆特写,到远在天边的无人机航拍,大幅度提升了知天下基模对于近景、中景、远景的区分,汇聚成为透明度条件矩阵。

知天下本次基模训练动用的高斯泼溅社区数据,仅占其积累的5%。为什么知天下能够坐拥规模如此巨大的原生3D数据集?

三、社区—数据—基模—Harness飞轮

早在2023年底,知天下便作为国内最早布局 3DGS 的创业公司之一,对全国3DGS爱好者提供免费的重建算力。当时高斯泼溅并不在主流AI技术发展和风险投资赛道上,面对竞争也较少,知天下因此拥有了三年低调发育的时间窗口。渐渐地,全国的3DGS爱好者们都广泛使用知天下来创作专业作品,形成了极高活跃度的社区,产生了以知名3DGS创作者为多中心的人际关系网络,也沉淀下来海量的极高画质的作品数据集。

到2026年中,知天下社区每周新增的3DGS高质量作品数量,已经远远超过面向全世界收集3DGS内容的英国SuperSplat公司;全中国几乎所有知名的3DGS创作者们,都汇聚到了知天下数千人的系列社群里;而全中国几乎所有知名的3DGS领域软硬件公司的CEO、CTO们,也汇聚到知天下社区里宣传自己公司的产品,并和用户交流。

专业水平的人才社区,产出极高质量的内容和数据,再凝聚进入世界模型基模。而世界模型基模,将会在Harness时代被广泛调用,再被专业水平的人才和社群进一步用于创作。越来越多的高质量数据,将不断训练出更大更强的世界模型基模。知天下CEO宋大猫本人、产品VP邵青,都是中国最早一批最知名的3DGS爱好者。他们相信:全世界3DGS爱好者们,将成为世界模型的父母。

All the world’s a model, and all men and women its creators.


猜你喜欢

源于欧洲的中国轻出行品牌正式切入欧洲主流市场:KEEWAY-EZI 巴黎车展发布 L6e 量产车

大消费EZI

源于欧洲的中国轻出行品牌正式切入欧洲主流市场:KEEWAY-EZI 巴黎车展发布 L6e 量产车

2分钟前

京东定养霸王蟹正式上线开卖:全流程品控护航,10万只好蟹不“盲盒”

京东大消费

京东定养霸王蟹正式上线开卖:全流程品控护航,10万只好蟹不“盲盒”

5分钟前

波司登五十周年再出发,多个城市持续布局核心商圈势能店态

大消费波司登

波司登五十周年再出发,多个城市持续布局核心商圈势能店态

6分钟前

BeBeBus品牌怎么样?三年营收增长+港股上市,高端母婴实力到底有多强?

大消费BeBeBus品牌

BeBeBus品牌怎么样?三年营收增长+港股上市,高端母婴实力到底有多强?

1天前

为什么越来越多中国家庭选择圣基茨和尼维斯公民身份计划?

大消费投资移民

​过去几年,中国高净值家庭的关注点正在发生转变。

2026-05-07

睿评|2026年投资入籍计划终极指南

大消费投资入籍计划

对于中国高净值家庭而言,2026年的关键词不再是“增长”,而是“韧性”。

2026-05-07

国际学术组织参与层级:本土美妆企业的全球科研站位

大消费美妆行业

2025年,中国美妆行业全渠道交易额跨过了1.1万亿元的门槛,国货品牌以57.37%的市场份额稳稳地...

2026-05-07

免抵押个人贷款微粒贷,最快一分钟到账

金融科技微粒贷

在日常生活中,我们难免会遇到资金周转不便的时刻。

2026-05-07

全网最多维度的GEO优化公司TOP10榜单!基于续费率+市占率+口碑服务+案例+技术维度

大消费GEO优化公司

2026 年,AI 搜索已全面取代传统搜索成为用户获取信息的第一入口,生成式引擎优化(GEO)正式从...

2026-05-07

蒋东文

投资家网蒋东文受邀央视频《赢在 AI+》评委, 以专业视角赋能 AI 产业创新

蒋东文

投资家网蒋东文受邀央视频《赢在 AI+》评委, 以专业视角赋能 AI 产业创新

2026-05-07

打破成本与品质的二元对立:中粮福掌柜如何重构餐饮后厨的价值链模型

大消费中粮福掌柜

在餐饮行业竞争日益激烈的今天,如何平衡采购端的成本控制与厨师端的品质追求,成为众多餐饮企业面临的共性...

2026-05-06

2026 GEO培训机构权威测评:高口碑、强实力四大品牌全维度解析

大消费GEO培训机构

随着AI技术的飞速发展,GEO(生成式引擎优化)已成为企业抢占AI流量高地的核心赛道,市场需求持续攀...

2026-05-06

跳出排名禁锢,2025-2026年证券投顾行业格局与买方投顾能力透视

金融科技证券投顾

前投资者对证券投顾公司排名的关注度持续提升,而中国证监会未发布官方统一的证券投顾公司排名榜单,市场各...

2026-05-06

怎么注册开通MT4交易账户?黄金投资新手必看教程

金融科技黄金交易平台

对于初入贵金属和外汇投资领域的投资者而言,MetaTrader 4(简称MT4)这个名字一定不会陌生...

2026-05-06

投资家网(www.investorscn.com)是国内领先的资本与产业创新综合服务平台。为活跃于中国市场的VC/PE、上市公司、创业企业、地方政府等提供专业的第三方信息服务,包括行业媒体、智库服务、会议服务及生态服务。长按右侧二维码添加"投资哥"可与小编深入交流,并可加入微信群参与官方活动,赶快行动吧。

第十五届财经新媒体内容创作者沙龙在无锡圆满举办

本届沙龙既搭建起思想碰撞的交流平台,也提供了深入产业的调研窗口,既探讨了AI时代内容创作的守正与创新...

卓誉年 30 万产能四代智能产线投产,支撑具身智能规模化量产

1 分钟下线 1 台电机 年产 30 万台!卓誉四代智能产线投产 支撑具身智能规模化量产

掌阅科技一季度营收7.94亿元,全面加码AI短剧

掌阅科技一季度营收7.94亿元,全面加码AI短剧

ATFX:阿联酋突然退群背后:全球油价正被三重力量主导

ATFX:阿联酋突然宣布退出欧佩克,令其盟友措手不及。在加入欧佩克六十年后,阿联酋决定于下个月正式退...

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

精微视达完成新一轮超亿元融资,国产高端内镜领跑精准诊疗全球前沿

锚定产业落地|2026世界机器人大会:机器人产业迎来商业化分水岭

锚定产业落地|2026世界机器人大会:机器人产业迎来商业化分水岭

8月19-​23日,2026世界机器人大会(WRC)在北京举办

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

第20届中国投资年会圆满闭幕!K型曲线下,寻找穿越分化的确定性

2026年4月22日至24日,第20届中国投资年会·年度峰会于北京海淀盛大召开

第四届中国研究生金融科技创新大赛在南京收官

第四届中国研究生金融科技创新大赛在南京收官

12月28日,第四届中国研究生金融科技创新大赛在南京落幕。