主要观点总结
两家初创公司Decart和Etched联手推出了世界上首个实时、可玩、可交互的世界模型Oasis,无需游戏引擎便能自动生成游戏。Oasis经过数百万小时游戏视频的训练,仅接收键盘输入即可实时生成开放世界游戏,而且开源了代码和模型权重。该项目引起了红杉资本的关注,并获得了2100万美金的投资。Oasis的技术重点在于视频和交互,它的出现标志着生成式交互体验新纪元的到来。Oasis基于Transformer架构,使用VAE和DiT组成模型,结合Decart的推理引擎和Etched的Sohu芯片实现实时视频生成。此外,文章还介绍了Decart和Etched公司的背景,以及Sohu芯片在AI推理方面的优势。
关键观点总结
关键观点1: Oasis的特点和创新点
Oasis是世界上首个实时、可玩、可交互的世界模型,通过数百万小时游戏视频的训练,实现了无需游戏引擎的自动生成游戏。它允许玩家进行移动、跳跃、拾取物品、打破砖块等操作,生成的视频内容不仅包含图形学的渲染,也体现出对物理原则和游戏规则的理解。此外,Oasis实现了开源和模型权重的公开,且公开了demo供玩家试玩。
关键观点2: Oasis的技术基础
Oasis基于Transformer架构,使用ViT和DiT组成模型,结合Decart的推理引擎和Etched的Sohu芯片实现实时视频生成。模型理解复杂的游戏机制,例如物体和建筑、照明的物理规律等。解决时间稳定性问题则通过部署动态噪声。
关键观点3: Decart和Etched的背景及投资情况
Decart是一家致力于提高AI模型的效率和降低运行成本的公司,成立于2023年9月。它的Oasis项目受到了红杉资本的关注并获得了2100万美金投资。Etched是一家人工智能芯片公司,推出了世界上第一个基于Transformer架构的ASIC芯片Sohu,专注于LLM推理加速。
关键观点4: Sohu芯片的优势
Sohu芯片是专为Transformer模型打造的AI芯片,具有极高的推理性能。相比其他芯片,它对Transformer模型的加速效果尤为显著,对视频生成等需要大量算力的任务来说是一种福音。
免责声明:本文内容摘要由平台算法生成,仅为信息导航参考,不代表原文立场或观点。
原文内容版权归原作者所有,如您为原作者并希望删除该摘要或链接,请通过
【版权申诉通道】联系我们处理。