ACESとバンダイナムコ研究所がAIを用いたキャラクターのモーション生成に関する研究開発プロジェクトを発足

キャラクターの属性やステイタスにあわせてAIが自然で多様なモーションを自動生成

画像・映像認識AIアルゴリズムの力でリアル産業のDXを目指す東大松尾研発のAIスタートアップである株式会社ACES（東京都文京区、代表取締役 田村 浩一郎、以下「ACES」）と、最先端技術の研究開発を起点に、『エンターテインメントの新しい価値を創出』する株式会社バンダイナムコ研究所（本社：東京都江東区、代表取締役社長：中谷始、以下「バンダイナムコ研究所」）は、AI技術を用いたキャラクターモーション作成に関する研究・開発プロジェクトを発足しました。ACESはこれまで、スポーツや製造業、小売、保育等様々な業界にAIアルゴリズムの開発・提供を行って参りましたが、エンターテインメント業界向けに開発・提供を行うのは今回が初となります。

背景とねらい

昨今バーチャルキャラクター市場の拡大に伴い、キャラクターの属性や場面に応じた自然で多様なキャラクターモーションの作成需要が高まっています。バンダイナムコ研究所では、メタバース※1及びxR技術※2の研究を進めるうえで、様々なキャラクターで複数のモーションを検証する必要があり、そのためには膨大な数のモーションデータを用意しなければならないという課題がありました。

そこで、人の知見や行動のデジタル化に強みを持つACESの技術と、バンダイナムコ研究所のエンターテインメントにおけるモーション制作のノウハウを生かし、AI技術である「モーションスタイル変換」を用いて、より多様なキャラクターモーションの生成を手軽に行うための研究開発を本格的に開始します。 

キャラクターの自然で複雑な表現が可能になると、見ている側のユーザーはより深く感情移入することができるため、ゲームや映像などコンテンツの価値向上につながります。また、メタバースをはじめ、オンライン上でユーザー同士のコミュニケーションを活性化させることは、新しいエンターテインメントの創出にもなると考えます。

プロジェクトの概要

多彩なキャラクターモーションを生成するためには、AI技術である「モーションスタイル変換」を用います。「モーションスタイル変換」とは、モーションを動作の内容を表す「コンテンツ」（例：歩く）と動作のニュアンスを表す「スタイル」（例：楽しそうに）に分解し、2つのモーションをかけ合わせた時に、一方のモーションの「コンテンツ」を維持し、もう一方のモーションの「スタイル」を反映した新しいモーション（例：楽しそうに歩く）を作成する技術のことを指します。

エンターテインメント向けデータに適用可能な「モーションスタイル変換」モデルを作成するためには、多種多様なキャラクターのモーションのデータセットが必要になります。

そのため、ACESがこれまで培ってきた人の行動をデジタル化する技術ノウハウを元に、バンダイナムコ研究所にて、プロの演者による移動や格闘等の動作に、喜怒哀楽の感情、老若男女といった属性はじめキャラクターらしさや状態に応じた個別のスタイルを適用させたモーションを撮影します。本プロジェクトでは、アルゴリズムを各種エンターテインメントに実装すべく研究開発を邁進してまいります。

※1メタバースとは、インターネット上に構築された仮想空間・世界やサービスの総称です。オンラインで全世界から参加することもできるため、ゲームやイベントといったエンターテインメントのほか、ビジネスとしての活用も行われています。

※２ xR 技術とは、AR（拡張現実）、VR（仮想現実）、MR（複合現実）といった現実世界と仮想世界を融合する表現技術の総称で、ゲームの他、様々なエンターテインメントコンテンツに利用されています。

株式会バンダイナムコ研究所概要

バンダイナムコ研究所は、バンダイナムコグループの研究開発専門企業として、最先端技術の研究開発を起点に「Creating Entertainment Innovation！～エンターテインメントの新しい価値を創出する～」をミッションに掲げ2019年4月に設立しました。これまでエンターテインメントの研究・開発で培ってきた経験や知見を最大限に活かし、世界中のイノベーターと積極的に共創を行うことで、『今までにない新しいアソビやエンターテインメント』を生み出していきます。

代表者： 代表取締役社長　中谷　始
所在地： 東京都江東区永代二丁目37番25号
設立：     2019年4月1日
URL：    https://www.bandainamco-mirai.com/