单张显卡实时生成3D世界，李飞飞World Labs推出全新世界模型RTFM

主要观点总结

World Labs推出实时框架模型RTFM，可实时生成交互式三维世界。该模型仅需单块H100 GPU，效率极高，在生成式人工智能领域实现突破。RTFM围绕效率、可扩展性和持久性三个核心设计原则展开，具有自回归扩散Transformer的特性。模型能够通过空间记忆和上下文切换维持大型世界的生成，让用户能在长时间交互中体验连贯的世界。World Labs表示这只是开始，未来会增强对动态世界的建模，并让用户能真正与生成的世界产生交互。

关键观点总结

关键观点1: 实时生成交互式三维世界

RTFM能够实时生成可交互的三维世界，效率极高，仅需单块H100 GPU。

关键观点2: 核心设计原则

RTFM围绕效率、可扩展性和持久性三个核心设计原则展开，其中效率体现在能够在单块GPU上以交互式帧率运行推理；可扩展性体现在其自回归扩散Transformer的特性，能够基于之前的帧预测下一帧；持久性则通过空间记忆和上下文切换实现。

关键观点3: 技术特点

RTFM采用了最新的架构设计、模型蒸馏和推理优化技术，在技术上实现了大胆的取舍和创新。它能够模拟复杂的光影效果，并模糊“重建”和“生成”之间的界限。

关键观点4: 未来展望

World Labs表示RTFM目前还只是开始，未来会增强对动态世界的建模，让用户能真正与生成的世界产生交互。同时，更大的模型、更多的算力投入，会持续带来性能提升。