Google Genieで操作できる世界を作る方法

TL;DR

Google Genieは、環境とキャラクターを文章で指定し、生成された世界を移動やジャンプで操作できるワールドモデルである。ストリートビューの場所も世界化できるが、操作は60秒間で、現状は移動以外の動作や地理的な正確性に制限がある。

Transcript

はい、こんにちは。ケトです。この チャンネルは生成の最新情報や活用事例を 紹介してます。是非チャンネル登録お願い いたします。そして今回のテーマは GoogleMapのストリートビューっ てあるじゃないですか。その ストリートビューの世界をゲームにする ことができる成AIがGoogleから リリースされてるらしいんですよ。はい。 その名もですね、Gーニーっていう ワールド生成モデルになってるんですけど 、これがですね、僕今利用することができ ましたので、え、実際にどんなものか試し てみました。で、その結論はですね、もう とんでもなくすごかったですね。まあ、 驚きますね。[笑い] ここまでできちゃうのかと。ま、これ何か と言いますと、プロンプトを投げるだけで 世界を作ります。そしてその世界に存... Read More

Key Insights

• Genieは、環境とキャラクターを文章で指定するだけで、操作可能な世界を生成できるワールドモデルである。生成したキャラクターは前後左右への移動やジャンプで操作できる。
• 利用条件は、動画で試した時点では月額200ドルのGoogle AI Ultraプランへの加入である。ただし、現状の機能は限定的なため、紹介者は利用を急ぐ必要はないと述べている。
• 基本的な生成手順は、環境とキャラクターを入力し、視点を選び、画像を作成してからワールド生成を実行する流れである。生成後はキーボードでキャラクターを直接動かせる。
• 操作可能時間は、生成した世界ごとに60秒間である。操作した場面は自動的に動画として記録され、後からダウンロードしてアニメーションなどの素材に利用できる。
• 物理的な挙動は、キャラクターの種類によって変化する。アリは柱を登れた一方、人型のキャラクターは同様に登れず、迷路ではジャンプが届かなければ壁を越えられなかった。
• 生成空間には、壁や家を通り抜けられない衝突表現や、隙間や路地へ入れる構造が存在する。ただし、前進を続けた際の空間が事前生成か逐次生成かは、検証だけでは判別できない。
• ストリートビュー連携は、選択した実在の場所へ任意のキャラクターを配置し、その視点で街を探索できる機能である。ただし、元画像から離れた場所の景観は正確とは限らない。
• 現段階の課題は、移動とジャンプ以外の動作を安定して指定しにくいことである。接近時のパンチは一度しか発生せず、人物の姿が変化するなどの予期しない挙動も見られた。

Questions & Answers

Q: Google Genieとは何ですか？

Google Genieは、文章で指定した環境とキャラクターから、利用者が操作できる世界を生成するワールドモデルである。画像や動画を作るだけでなく、生成されたキャラクターを前後左右に移動させたり、ジャンプさせたりできる点が特徴で、ゲームやシミュレーションに近い体験を作れる。

Q: Google Genieで操作可能な世界を作る方法は？

最初に「独自に作成」を選び、作りたい環境と、その場所に存在させるキャラクターを文章で入力する。続いて一人称または三人称の視点を設定し、スケッチ機能で画像を生成する。完成した画像でワールド生成を実行すると、キーボードを使ってキャラクターを操作できる。

Q: Google Genieではキャラクターをどのように操作できますか？

動画内の操作では、Wキーで前進し、AキーとDキーで左右へ移動または方向転換し、スペースキーでジャンプしている。基本的に利用者が実行できるのは移動とジャンプであり、ペンキ塗りの手の動きなどは世界側が自動的に生成した挙動として示されている。

Q: Google Genieの利用条件と制限は何ですか？

動画で紹介された時点では、利用には月額200ドルのGoogle AI Ultraプランへの加入が必要とされている。また、生成した世界を操作できる時間は60秒間で、移動とジャンプ以外のアクションは基本的に限定される。現状では用途も少ないため、利用を急ぐ必要はないとの評価である。

Q: Googleマップのストリートビューからゲーム世界を作る方法は？

ワールド作成画面で「Googleから場所を選択する」を使い、ストリートビュー上から目的の場所を決定する。次に、その場所へ登場させたいキャラクターを入力し、視点を選んでワールドを生成する。動画ではニューヨーク州の街に鳩を配置し、鳩の視点で街や路地を探索した。

Q: ストリートビューから生成した世界は実際の場所を正確に再現しますか？

開始地点付近はストリートビューを反映した現実的な景観になるが、元の写真で確認できる範囲を離れると、実在しない場所や構造が現れる可能性がある。渋谷の例では実際にあるか不明な場所が生成され、ニューヨーク州の例でも路地の奥は別の世界になっている可能性が指摘された。

Q: Google Genieは物理的な動きをどこまで表現できますか？

壁や家にぶつかると前進できず、ジャンプが低ければ障害物を越えられないなど、ゲームに近い衝突や移動の表現が確認された。また、アリは柱を登れた一方、人型キャラクターは登れなかった。キャラクターに応じた挙動は見られるが、その仕組みは動画内では断定されていない。

Q: Google Genieにはどのような活用方法がありますか？

ゲームの試作、現実世界のシミュレーション、オリジナルキャラクターの散歩場面、操作した映像を使ったアニメーション素材などへの活用が考えられる。現状は複雑な動作の制御が難しいが、将来パンチや射撃、障害物に触れた際のゲームオーバーなどを指定できれば、文章だけでゲームを作れる可能性がある。

Summary & Key Takeaways

• Genieでは、作りたい環境と登場させるキャラクターを自然な言葉で入力し、一人称または三人称の視点を設定する。最初に画像を生成し、その画像からワールドを作ると、Wキーなどによる前後左右の移動やスペースキーによるジャンプが可能になる。生成後の操作時間は60秒間で、その場面は動画として録画され、ダウンロードできる。

• 検証では、巨大な家具に囲まれたアリ、渋谷を飛ぶ飛行機、迷路を進むキャラクター、歩くブロック、海中の金魚、壁を塗る人物、犬と猫の格闘などを生成した。アリは柱を登り、人型キャラクターは登れないなど、対象に応じた挙動が見られた一方、格闘のパンチは一度しか発生せず、キャラクターが別の姿に変わる不安定さも確認された。

• Googleマップから場所を選択すると、そのストリートビューを基に操作可能な世界を生成できる。ニューヨーク州の街に鳩を配置した例では、鳩を動かして路地裏へ入ったり、連続でジャンプしたりできた。ただし、元画像の範囲を離れると実際とは異なる景観になる可能性があり、現段階では正確な地理再現より、世界生成やゲーム制作の試作に適している。