人生にゲームをプラスするメディア

AIがゲーム画面を見て操作!? miHoYo、汎用AIエージェント「Gamer」の研究成果を公開

『崩壊:スターレイル』では、サイドクエスト2種およびミニゲーム7種を用いて検証が行われたようです。

ゲーム ニュース
miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる
  • miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる
  • miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる
  • miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる
  • miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる

『原神』などを手掛けるmiHoYoの研究チームは11月13日、さまざまなゲームのプレイに対応した汎用AIエージェント「Gamer」に関する研究論文をarXivで公開しました。

ゲーム開発での“テスト役”としての用途も

論文が公開された「Gamer」は、ゲーム画面に映る情報をもとにキーボードとマウスを操作して、キャラクターを移動させたり会話を進めたりと、自律的にゲームをプレイできるAIです。

Gamerの開発にあたっては、Alibabaが公開したAIモデル「Qwen3-VL(8B)」をベースに、研究チームが数万時間分のプレイ記録を使い、画面の状況に応じたキーやマウスの操作を学ばせたとのこと。

次に、プレイ記録へ「何のためにその操作をしたのか」という説明を加えて目標に沿った行動を学ばせ、その後はAI自身にゲームをプレイさせるとともに、試行錯誤を通じて目標の達成につながる行動を学ぶ「強化学習」も行っています。

Gamerの性能検証には『崩壊:スターレイル』のほか、『DOOM』をベースとした研究環境「ViZDoom」などが用いられました。『崩壊:スターレイル』では、学習に使っていないサイドクエスト2種とミニゲーム7種類を使い、強化学習後のGamerを評価しています。

サイドクエストにおいては、指定の場所への移動やキャラクターとの会話など、クエストを進めるうえでの途中目標を一つずつ評価。それぞれの結果は以下の通りです。

  • サイドクエスト「慢蔵誨盗・その1」:途中目標の達成率 80.0%

  • サイドクエスト「動物は獰猛」:途中目標の達成率 83.6%

  • ミニゲーム7種類:平均成功率 49.7%(同じ評価におけるGPT-6.1-Solは17.1%)

サイドクエスト2種におけるモデル別の途中目標達成率。表中の「Gamer-RL」が強化学習後の結果
Gamerの評価に用いた『崩壊:スターレイル』のミニゲーム7種

研究チームはGamerの用途として、ゲーム開発における自動テストへの応用を例に挙げました。具体的には、クエストが正常に進行するかの確認や、アップデート後の既存コンテンツにおける回帰テストなどへの活用が考えられるとのことです。

なお、プロジェクトページでは、Gamerが実際に『崩壊:スターレイル』をプレイした映像も公開されていますので、ぜひご覧ください。


miHoYo、ゲームを遊ぶAIの研究成果を公開。AIがゲーム画面を見てキーボード&マウスを操作―『崩壊:スターレイル』などで検証。やっぱり『DOOM』系環境も使われる

《松本鹿介》

編集部おすすめの記事

ゲーム アクセスランキング

  1. カードゲーム世界大会決勝で、負けた選手が「相手のサイン」を求めながら投了―新王者の誕生祝う粋な行動に会場大盛り上がり

    カードゲーム世界大会決勝で、負けた選手が「相手のサイン」を求めながら投了―新王者の誕生祝う粋な行動に会場大盛り上がり

  2. 『スプラトゥーン レイダース』体験版が配信開始!6つのガジェットを使って「シャケ」たちとガチバトル

    『スプラトゥーン レイダース』体験版が配信開始!6つのガジェットを使って「シャケ」たちとガチバトル

  3. ぺたんと座るゴンやキルアたちが可愛い!「HUNTER×HUNTER」グリードアイランド編より、ヒソカたちのフィギュア全6種

    ぺたんと座るゴンやキルアたちが可愛い!「HUNTER×HUNTER」グリードアイランド編より、ヒソカたちのフィギュア全6種

  4. 『原神』と日本マクドナルドが初コラボ!ヴァレサ&エスコフィエの限定パッケージや、「風の翼」などゲーム内アイテムを提供

  5. ファミリーマートが『ドラクエ』コラボを示唆!公式Xで、“ファミマのロゴから飛び出すスライム”の画像が投稿

  6. スイッチ2、独自の軽量型DLSS実装が判明―デスクトップ版より4倍高速な「DLSS Lite」プリセットを搭載

  7. 『ウマ娘』アーモンドアイたち3人の“原案イラスト”が公開!ゲーム内とひと味違う雰囲気は一見の価値あり

  8. 「なんだその尻は!その胸は!」『FGO』新規サーヴァント「★5 ダイナマイト利休」が実装…ムッチムチすぎる水着千利休

  9. 「プロデューサー」「提督」「マスター」「指揮官」……増え続けるプレイヤーたちの「職歴」─あなたが“転職 or 兼業”したのはどの作品?

  10. 『アオハルカノジョ』自由な会話入力から生まれる「あなたにだけ」向けられる言葉─“AIと紡ぐ”青春をひと足先に体験【プレイレポ】

アクセスランキングをもっと見る