李飞飞发布Frameboy 世界模型网页实时跑出15帧
时间:2026 年 11 月 5 日
地点:线上发布,World Labs 官方博客与 frameboy.worldlabs.ai 演示页
人物:李飞飞,World Labs 创始人;2026 年 9 月 World Labs 被 AMD 以约 82 亿美元全股票交易收购,李飞飞出任执行副总裁兼首席科学家
事件详情:11 月 5 日,World Labs 在官方博客发布研究预览版演示 Frameboy,把自回归世界模型 Atlas 接入实时交互:用户在浏览器中操控相机时,生成画面从云端 GPU 以最高 15 帧每秒流式传回,等于大约每 67 毫秒就能拿到一帧新画面。Frameboy 提供的是为极致推理效率高度优化的 Atlas 变体,在保持生成式新视角合成能力的同时把输出速度推到实时区间。用户点击不同的游戏卡带即可选择预置场景,加载十几秒后可以用触屏或键盘的方向键与摇杆自由移动、调整视角,在由单张图片生成的 3D 世界中漫游。官方同时把这项实时能力集成进网页应用 Viewfinder,以流式叠加渲染模式呈现:用户先用 Atlas 逐帧搭建自己的场景,每一帧同时生成色彩与深度,再开启 Frameboy 叠加层边漫游边接收流式画面。Viewfinder 目前处于封闭测试阶段,需要加入官方等候名单。
背景:World Labs 两个月前发布 Atlas,这是其自回归世界模型,可逐帧生成并实现像素级精确的相机控制,既能以单张图片或一段文本从零生成场景,也能基于多张真实场景图像合成新视角。Frameboy 沿用的是同一套思路:去年 World Labs 曾发布轻量帧生成模型 RTFM 的研究预览版,Atlas 借鉴 RTFM 的设计并大幅放大,RTFM 主要在既有视角之间插值,而 Atlas 能从零生成。官方在博客中把速度列为影响交互体验的核心瓶颈:如果用户要等几十秒甚至几分钟才能看到 Atlas 生成的视频,就只能谨慎地按部就班搭建场景、规划相机路径;而当一次坏想法的调用成本接近零,探索本身就不再有代价。对照来看,谷歌 DeepMind 2025 年 8 月发布的 Genie 3 可在 720p 下实现 24 帧每秒实时交互,而 Atlas 的画面分辨率最高可达 1440p。今年 9 月 AMD 以约 82 亿美元全股票交易收购 World Labs,为其世界模型研发带来更直接的算力协同空间。
影响:对用户和开发者来说,世界模型的交互门槛从提交任务后等结果,变成边走边看,探索一个虚拟世界的迭代周期被压缩到可以靠直觉试错的程度。官方列出的使用场景包括考察知名地标、为影视拍摄勘景、查看工地进度、把概念扩成 3D 游戏关卡,以及为机器人导航做环境仿真。代价同样直接:Frameboy 目前必须跑在云端高性能 GPU 服务器上,官方承认相比本地渲染方式并不便宜,帧率上限也只有 15 帧,实际操作仍略显卡顿。实时世界模型由此进入帧率够用、成本待摊的阶段,真正的瓶颈从模型算法转向推理效率、算力资源与底层硬件。
总结:李飞飞团队把世界模型的竞争焦点从生成得像不像推进到了生成得快不快。Frameboy 用一次研究预览级的演示证明,自回归世界模型可以在浏览器里被当成可操控的实时环境,而不必每次都等待一段渲染结果。Atlas 负责质量,Frameboy 负责速度,Viewfinder 则把两者接成一套创作流程。对行业而言,实时世界模型正在从研究演示走向可用的交互底座,但其成本结构和帧率上限仍远未达到普及程度。在 9 月被 AMD 收购之后,这家团队在推理优化与算力上的推进条件也已经发生变化。
常见问题:
问:Frameboy 怎么玩?
答:打开 frameboy.worldlabs.ai,点卡带选场景,加载十几秒后用方向键漫游 3D 世界,最高 15 帧。
问:李飞飞的世界模型是哪个?
答:自回归世界模型 Atlas,2026 年 9 月发布,可逐帧生成并实现像素级精确的相机控制。
问:这次开源了吗?
答:官方放出的是研究预览版演示,Viewfinder 仍需申请等候名单。
参考来源:
World Labs 官方博客
https://www.worldlabs.ai/blog/atlas-realtime
Frameboy 官方演示
https://frameboy.worldlabs.ai/
智东西
https://zhidx.com/p/607939.html
IT之家
https://m.ithome.com/html/1023063.htm
36氪
https://eu.36kr.com/zh/p/4057553085404038
AlphaSignal
https://alphasignal.ai/news/world-labs-streams-atlas-generated-3d-worlds-to-browsers-at-15-fps
网易
https://www.163.com/dy/article/LB1S1J0S0511B8LM.html







