李飞飞领航:World Labs发布实时持久的全新3D世界模型RTFM
在10月16日的线上发布会上,斯坦福大学计算机视觉先驱李飞飞及其创业团队World Labs正式推出全新世界模型RTFM(Real‑Time Frame Model),标志着生成式AI在三维空间构建领域实现了关键突破。该模型能够在单张NVIDIA H100 GPU上实现交互级帧率的实时推理,极大降低了硬件门槛,使普通科研团队和创意工作者也能轻松使用。
RTFM的核心特性包括实时运行、持久性和3D一致性。用户只需提供一张图片或简短文字提示,即可生成一个可无限探索、永久保存的三维虚拟世界。生成的场景在视角切换时保持几何结构不变,避免了传统方法中常见的形变和漂移问题。
模型在视觉风格上表现出高度多样性。无论是卡通、赛博朋克还是写实风格,RTFM都能精准还原并在三维空间中保持统一的艺术风格。团队演示了将不同风格的二维素材无缝转化为3D场景的过程,展示了其在游戏、影视预制和虚拟现实创作中的广阔应用前景。
持久性是RTFM的另一大亮点。生成的3D世界会被永久保存,用户可以随时返回同一场景继续探索或进行二次编辑,而无需重新渲染或重新训练模型。这一特性为长期项目的协同创作提供了可靠的技术支撑。
在可扩展性方面,RTFM支持将多个独立生成的场景无缝拼接,构建更大规模的虚拟环境。通过统一的几何表示和一致的光照模型,拼接后的世界在视觉上保持连贯,用户可以在同一浏览器窗口中自由漫游,体验几乎无限的空间扩展。
技术实现上,RTFM采用端到端的通用架构,从海量视频数据中自主学习空间结构和运动规律,无需显式的3D表征或额外的几何标注。该方法突破了传统三维重建对深度传感器或多视角图像的依赖,实现了“一键生成”式的空间智能。
发布会现场,李飞飞强调,RTFM的推出不仅是学术研究的里程碑,更是AI生成内容(AIGC)进入实用阶段的重要标志。她指出,随着模型效率的提升和硬件成本的下降,未来的创意产业、教育培训以及工业仿真都将受益于这种实时、持久且易于部署的三维世界生成技术。
目前,RTFM已开放Beta预览版,用户可通过World Labs官方平台申请体验。团队计划在后续版本中进一步提升模型的细粒度控制能力,并探索与大语言模型的深度融合,以实现更自然的人机交互和场景编辑功能。
- 作者:佚名
- 编辑:杨磊
热图一览
今日推荐
- 新流感毒株来袭 高危人群防护刻不容缓
- 抗衰赛道扩容,Swisse PLUS成为健合集团(01112)的新增长点?
- 德国工业新订单连续第3个月下降,经济前景堪忧
- 尼泊尔中产买爆中国电动汽车,中国品牌占据主导地位
- 中国科学家在6G通信领域取得新突破,引领全球通信技术新纪元
- 鸿蒙5终端用户突破1200万,华为生态再创新高
- 二季度美国智能手机销量同比增长9%,运营商促销成关键推动力
- 本周多晶硅成交价格突破5万元/吨,硅业分会:硅价持续上涨
- 宇树发布新款四足机器狗,性能全面升级,引领机器人新潮流
- 鸿海以3.75亿美元出售美国一工厂,加速全球战略调整
- 7000亿煤炭巨头要一口吃下13家公司,煤炭行业整合迈入新阶段
- 简单拍荣获“保险自媒体最佳工具奖”!
- 家居行业被阴霾所笼罩,企业转型突围迎来新机遇
- 中国汽车市场整合加速,行业格局重塑在即
- 富力地产387处房产整体拍卖,起拍价3.9亿元,凸显企业资金困境
- 李嘉诚旗下长和港口交易重大调整,拟引入中国内地投资者加入财团
- SpaceX首次公开提示:马斯克可能重返美国政坛
- 北京CBD偶遇机器人逛街跳舞,科技与艺术的完美融合
信息服务
热点推荐
- 国台办:热情欢迎和支持广大台胞参与两岸文旅交流合作
- 工业和信息化部办公厅关于开展2022纺织服装“优供给促升级”活动
- 2017紫金知识产权国际峰会新闻发布会在南京举行
- 工业和信息化部组织开展电信业务"明白办、放心用"行动
- 中国智能显示创新大会在武汉举办
- 民营媒体机构的探索与思考 天空宽频以高端对话庆祝新中国成立70
- 全国300城市土地出让金总额为34407.7亿元
- 开启“下饺子”模式!国产CT一哥研发实力爆发频推新品
- 研学遇冷 订单缩减百分之三十,暑期研学市场遭遇“寒冬”
- 新能源汽车带来的汽车产业革命未来几年会逐步显现
- 河南鑫山党委荣获第四届全国基层党建创新“优秀案例”
- 成本效益全兼顾,云软ImCC混合云客服前景无限!
- 云库汇ABS Club:资产证券化之融资租赁资产评级梳理
- 2017中国管理·全球论坛悬念海报引发猜想
- 新冠病毒疫苗接种情况(截至5月12日)
- 今年前三季度我国新改建农村公路11.8万公里
- 工业和信息化部办公厅 商务部办公厅 市场监管总局办公厅 关于开
- 白皮书:中国能源含“绿”量不断提升 保障人民美好生活需要