Oasisはどのように機能しますか？

イスラエルのAI企業DecartがEtchedと協力して開発したOasisは、AI生成のインタラクティブ体験における画期的な進展を表しています。Sequoia CapitalとOren Zeevから2100万ドルの資金を確保した後に立ち上げられたOasisは、AIが従来のゲームエンジンに依存せずにリアルタイムのゲームプレイを生成できる方法を示しています。このシステムは、ユーザーが移動、ジャンプ、アイテムを拾い、ブロックを壊し、生成された世界とリアルタイムで相互作用できるMinecraftのような環境を作成します。

Oasis Decart AIの主な機能

オアシスは、従来のゲームエンジンなしでリアルタイムのインタラクティブなゲームプレイを生成する画期的なAIモデルです。ユーザーのキーボードとマウスの入力を処理するためにトランスフォーマーベースのアーキテクチャを使用し、物理、ゲームルール、グラフィックスをフレームごとにシミュレーションしながら、1秒間に20フレームでゲームプレイを生成します。このシステムは現在、プレイヤーが移動、ジャンプ、アイテムを収集し、手続き的に生成された世界でブロックを壊すことができるマインクラフトのような体験を作り出しています。

リアルタイム生成: トランスフォーマーモデルを通じて20FPSでゲームプレイを生成し、ユーザー入力を即座に処理してインタラクティブな体験を作り出します

エンドツーエンドAIシミュレーション: 従来のゲームエンジンなしで物理、ゲームルール、グラフィックスをシミュレートし、AIモデルのみを使用します

カスタムワールド機能: ユーザーが自分のソース画像をアップロードしてプレイ可能なゲームワールドを作成できるようにします

スケーラブルアーキテクチャ: NVIDIA H100 GPUとEtchedのSohuチップの両方に最適化されており、潜在的な4K解像度のゲームプレイを可能にします

Oasis Decart AIの使用例

ゲーム開発プロトタイピング: 従来のプログラミングなしでゲームコンセプトの迅速な作成とテストを可能にします

インタラクティブコンテンツ作成: エンターテインメントや教育目的のために静的画像からインタラクティブな環境を生成します

AI研究プラットフォーム: より複雑なインタラクティブな世界モデルを研究・開発するための基盤として機能します

メリット

従来のコーディングなしでのゲーム生成に対する革命的アプローチ

高速フレームレートでのリアルタイムインタラクティビティ

異なるハードウェアプラットフォームをサポートする柔軟なアーキテクチャ

デメリット

グラフィックスの品質と解像度における現在の制限

長時間のセッション中のメモリ問題

レベルレイアウトを「忘れる」傾向とオブジェクトの外観の変化

トレーニングデータに関する潜在的な著作権の懸念

Oasis Decart AIの使用方法

リポジトリをダウンロード: 次のコマンドを使用してリポジトリをクローンします: git clone https://github.com/etched-ai/open-oasis.git

依存関係をインストール: ディレクトリに移動し、必要なパッケージをインストールします: cd open-oasis && pip install -r requirements.txt

モデルチェックポイントをダウンロード: Hugging Face CLIを使用して必要なモデルファイルをダウンロードします: huggingface-cli login huggingface-cli download Etched/oasis-500m oasis500m.pt huggingface-cli download Etched/oasis-500m vit-l-20.pt

モデルを実行: 基本的な推論スクリプトを使用してプロンプトフレームをロードし、アクションに基づいて追加のフレームを生成します。出力はvideo.mp4として保存されます

ゲームプレイを制御: キーボードとマウスの入力を使用して: - 移動 - ジャンプ - アイテムを拾う - ブロックを壊す - インベントリを確認

ライブデモを試す（代替）: モデルの最も強力なバージョンにアクセスするには、ローカルで実行するのではなく、Decartのウェブサイトでライブデモを訪れてください