https://oasis.decart.ai/?utm_source=aipure
產品資訊
已更新:04/11/2024
什麼是Oasis Decart AI
由以色列 AI 公司 Decart 與 Etched 合作開發的 Oasis 代表了 AI 生成互動體驗的突破。在從 Sequoia Capital 和 Oren Zeev 獲得 2100 萬美元的融資後推出,Oasis 展示了 AI 如何在不依賴傳統遊戲引擎的情況下生成實時遊戲玩法。該系統創建了一個類似 Minecraft 的環境,用戶可以在其中移動、跳躍、拾取物品、破壞方塊,並以每秒 20 幀的速度與生成的世界進行實時互動。
Oasis Decart AI 的主要功能
Oasis 是一個突破性的 AI 模型,能夠在沒有傳統遊戲引擎的情況下生成實時、互動的遊戲玩法。它使用基於變換器的架構來處理用戶的鍵盤和鼠標輸入,以每秒 20 幀的速度生成遊戲玩法,同時在每個幀上模擬物理、遊戲規則和圖形。目前,該系統創建了一個類似 Minecraft 的體驗,玩家可以在程序生成的世界中移動、跳躍、收集物品和破壞方塊。
實時生成: 通過變換器模型以每秒 20 幀的速度生成遊戲玩法,即時處理用戶輸入以創建互動體驗
端到端 AI 模擬: 在沒有傳統遊戲引擎的情況下模擬物理、遊戲規則和圖形,僅使用 AI 模型
自定義世界功能: 允許用戶上傳自己的源圖像以創建可玩的遊戲世界
可擴展架構: 優化支持 NVIDIA H100 GPU 和 Etched 的 Sohu 芯片,實現潛在的 4K 分辨率遊戲玩法
Oasis Decart AI 的用例
遊戲開發原型設計: 允許在沒有傳統編程的情況下快速創建和測試遊戲概念
互動內容創作: 從靜態圖像生成互動環境,用於娛樂和教育目的
AI 研究平台: 作為研究和開發更複雜互動世界模型的基礎
優點
在沒有傳統編碼的情況下革命性的遊戲生成方法
具有快速幀率的實時互動
支持不同硬件平台的靈活架構
缺點
圖形質量和分辨率的當前限制
長時間會話中的記憶問題
傾向於 '忘記' 關卡佈局並改變物體外觀
訓練數據可能涉及版權問題
如何使用 Oasis Decart AI
下載存儲庫: 使用以下命令克隆存儲庫:git clone https://github.com/etched-ai/open-oasis.git
安裝依賴項: 導航到目錄並安裝所需的包:cd open-oasis && pip install -r requirements.txt
下載模型檢查點: 使用 Hugging Face CLI 下載所需的模型文件:
huggingface-cli login
huggingface-cli download Etched/oasis-500m oasis500m.pt
huggingface-cli download Etched/oasis-500m vit-l-20.pt
運行模型: 使用基本推理腳本加載提示幀並根據動作生成額外的幀。輸出將保存為 video.mp4
控制遊戲玩法: 使用鍵盤和鼠標輸入來:
- 移動
- 跳躍
- 拾取物品
- 破壞方塊
- 查看庫存
嘗試在線演示(替代方案): 要訪問模型的最強大版本,請訪問 Decart 網站上的在線演示,而不是本地運行
Oasis Decart AI 常見問題
Oasis 是第一個可玩的、實時的、開放世界的 AI 模型,它作為一個由變壓器逐幀生成的互動視頻遊戲運行。