Oasis是什么
Oasis是世界上首款AI实时生成的游戏,由Decart和Etched联合推出。游戏能以每秒20帧的速度实时渲染交互式视频内容,无需游戏引擎,通过AI模型直接生成。玩家可以自由移动、跳跃、拾取物品,体验由AI实时塑造的游戏世界。Oasis基于Transformer架构,结合ViT和DiT技术,实现了低延迟的实时互动。代码和模型权重已开源,推动社区贡献和技术创新。Oasis的出现预示着AI个性化内容新时代的来临。
Oasis的主要功能
- 实时内容生成: Oasis能根据玩家的键盘输入实时生成游戏画面,意味着游戏世界能即时响应玩家的行为。
- 自由探索与互动: 玩家可以在Oasis中自由移动、跳跃、打破或建造方块,探索全新生成的地图世界,提供了高度的互动性和探索自由度。
- 无需游戏引擎: Oasis不依赖传统的游戏引擎,使用AI基座模型来生成游戏内容,降低了开发复杂性开辟了新的内容创造方式。
- 物理规则和游戏机制的内建理解: Oasis展现了对物理原则和游戏规则的理解,生成的内容包括图形渲染,对游戏逻辑的模拟。
- 高帧率渲染: 游戏以每秒20帧的速度实时渲染,为玩家提供了流畅的游戏体验。
- 开放世界体验: Oasis提供了一个开放世界,玩家可以在其中体验到各种不同的地形,如海岸、村庄、森林和沙漠。
- 基于玩家输入的动态调整: 游戏能根据玩家的输入动态调整游戏世界,提供个性化的游戏体验。
- 硬件优化: Oasis针对特定的硬件(如Etched的Sohu芯片)进行了优化,实现更高的性能和更优的用户体验。
- 交互式视频内容: 游戏生成静态图像,生成交互式视频内容,为视频游戏领域带来了新的可能性。
Oasis的技术原理
- 模型架构:Oasis基于Transformer的模型架构,包括Diffusion Transformer骨干网络和Transformer-based autoencoder,是专为快速自回归交互式视频生成而设计的。
- 低延迟设计:Decart团队推出能实现低动作到帧延迟的模型架构,系统能快速响应玩家的输入。
- 硬件优化:Oasis针对特定的GPU和服务器硬件架构进行专有系统优化,实现更高效的性能。
- Sohu芯片:Oasis将在Sohu芯片上运行,是Etched即将推出的专为处理大规模视频模型而设计的ASIC(专用集成电路),能支持4K分辨率下运行超过1000亿参数的模型。
Oasis的项目地址
- 项目官网:oasis-model.github.io
- GitHub仓库:https://github.com/etched-ai/open-oasis
- HuggingFace模型库:https://huggingface.co/Etched/oasis-500m
- 在线体验Demo: oasis.decart.ai
Oasis的应用场景
- 视频游戏:提供全新的游戏体验和无限可能的游戏环境。
- 教育和培训:创造模拟环境进行技能培训和提供互动式学习体验。
- 虚拟旅游和探索:支持用户探索虚拟世界和提供安全的探险体验。
- 电影和娱乐:实时生成电影场景和创建互动式电影。
- 社交互动:开发虚拟社交平台和提供增强现实社交体验。
© 版权声明
文章版权归作者所有,未经允许请勿转载。
相关文章
暂无评论...