专栏名称: 新智元
智能+中国主平台,致力于推动中国从互联网+迈向智能+新纪元。重点关注人工智能、机器人等前沿领域发展,关注人机融合、人工智能和机器人革命对人类社会与文明进化的影响,领航中国新智能时代。
TodayRss-海外RSS稳定源
目录
今天看啥  ›  专栏  ›  新智元

全球首款AI游戏诞生!无需游戏引擎,视频模型直出「我的世界」

新智元  · 公众号  · AI  · 2024-11-02 12:59
    

主要观点总结

两家初创公司Decart和Etched联手推出了世界上首个实时、可玩、可交互的世界模型Oasis,无需游戏引擎便能自动生成游戏。Oasis经过数百万小时游戏视频的训练,仅接收键盘输入即可实时生成开放世界游戏,而且开源了代码和模型权重。该项目引起了红杉资本的关注,并获得了2100万美金的投资。Oasis的技术重点在于视频和交互,它的出现标志着生成式交互体验新纪元的到来。Oasis基于Transformer架构,使用VAE和DiT组成模型,结合Decart的推理引擎和Etched的Sohu芯片实现实时视频生成。此外,文章还介绍了Decart和Etched公司的背景,以及Sohu芯片在AI推理方面的优势。

关键观点总结

关键观点1: Oasis的特点和创新点

Oasis是世界上首个实时、可玩、可交互的世界模型,通过数百万小时游戏视频的训练,实现了无需游戏引擎的自动生成游戏。它允许玩家进行移动、跳跃、拾取物品、打破砖块等操作,生成的视频内容不仅包含图形学的渲染,也体现出对物理原则和游戏规则的理解。此外,Oasis实现了开源和模型权重的公开,且公开了demo供玩家试玩。

关键观点2: Oasis的技术基础

Oasis基于Transformer架构,使用ViT和DiT组成模型,结合Decart的推理引擎和Etched的Sohu芯片实现实时视频生成。模型理解复杂的游戏机制,例如物体和建筑、照明的物理规律等。解决时间稳定性问题则通过部署动态噪声。

关键观点3: Decart和Etched的背景及投资情况

Decart是一家致力于提高AI模型的效率和降低运行成本的公司,成立于2023年9月。它的Oasis项目受到了红杉资本的关注并获得了2100万美金投资。Etched是一家人工智能芯片公司,推出了世界上第一个基于Transformer架构的ASIC芯片Sohu,专注于LLM推理加速。

关键观点4: Sohu芯片的优势

Sohu芯片是专为Transformer模型打造的AI芯片,具有极高的推理性能。相比其他芯片,它对Transformer模型的加速效果尤为显著,对视频生成等需要大量算力的任务来说是一种福音。


免责声明:本文内容摘要由平台算法生成,仅为信息导航参考,不代表原文立场或观点。 原文内容版权归原作者所有,如您为原作者并希望删除该摘要或链接,请通过 【版权申诉通道】联系我们处理。

原文地址: 访问原文地址
总结与预览地址:访问文章预览/总结
文章地址: 访问文章快照