サイバーエージェントとNVIDIAは、高品質なデジタルヒューマンの開発および3DCG技術の拡充、コンピューティングインフラストラクチャ構築を目的に、協業を開始したことを発表。
本協業では、NVIDIAが提供する「NVIDIA Omniverse」などを活用してデジタルヒューマンの研究開発を加速させるとともに、日本市場の固有ニーズに対応した3DCG技術の共同研究を行うことで、AIでクリエイティブの新たなステージを切り拓き、ビジネス機会の創出を目指す。
AI研究開発組織「AI Lab」を有し3DCG技術を活用したビジネス展開に注力するサイバーエージェントと、グラフィックス、シミュレーションおよびAIにおける高度なテクノロジーを有し、アクセラレーテッドコンピューティングで世界をリードするNVIDIAが協業することで、両社のもつ研究開発力とサービスへの実装力を通じて、さらなる3DCG技術の発展と社会実装拡大の実現に取り組んでいく。
昨今、3DCG技術は映画やゲームなどのエンターテインメント領域における活用にとどまらず、人間の分身として人間本来の活動に加え、時空を超えた新しい表現を可能にするデジタルヒューマンや仮想世界における活用が進むなど、世界的に注目を浴びている。
このような背景のもと開始した、本協業における重要テーマは次のとおり。
取り組み内容
「NVIDIA Omniverse」を活用したデジタルヒューマン事業開発
デジタルヒューマンにおける開発では、精密でフォトリアリスティックな3DCGモデルの制作だけでなく、人間の精細な感情の表現も重要なため、最先端の機械学習手法を取り入れた高度な映像表現を実現することが重要である。とくに、顔や体を高精細に表現するCG技術、発話映像と音声を同期するリップシンク技術、そして、パーソナライズする上で膨大なパターンのコンテンツ生成が必要とされている。
サイバーエージェントは、著名人のデジタルツインをキャスティングする「デジタルツインレーベル」事業において、「Omniverse」 および「Omniverse Audio2Face」を活用することで、実在する著名人のデジタルアバターのクリエイティブ制作やより自然な発話を実現し、多種多様な広告の生成を目指す。
「Omniverse Audio2Face」の日本語対応における共同研究
Omniverse Audio2Faceを日本語の自然言語処理や音声合成と結び付けるため、両社は今後、日本語対応の共同研究についても視野に入れている。サイバーエージェントは、日本語話者の再現研究を行っており、そのスクリプトをもとにした日本語の学習データは、Omniverse Audio2Faceを日本語に対応させるためのAIモデルのトレーニングに活用できる。
日本語の形態素解析や感情分析をもとにOmniverse Audio2Faceを日本語対応させることで、デジタルヒューマンの日本語発話の精度向上を目指すとともに、さらなる高度なデジタルヒューマンの実現への道筋となることを期待している。
高品質なデジタルヒューマン開発に向けたAI開発環境の構築
高品質なデジタルヒューマンの開発を加速し、さまざまな領域における高度なAI開発を推進するためには、十分なパフォーマンスを提供することができるエンタープライズ規模のコンピューティングインフラストラクチャが必須である。
サイバーエージェントとNVIDIAは、「NVIDIA Omniverse Enterprise」の活用をはじめ、最高クラスのインフラストラクチャと高速かつスケーラブルなパフォーマンスを提供することができるAI開発環境の構築においても協業していく。
デジタルヒューマン制作過程イメージ（サイバーエージェント）
制作したデジタルヒューマンの表情を動かす工程において、「NVIDIA Omniverse Audio2Face」を活用し、音声ソースからフェイシャルアニメーションを自動生成する。
NVIDIA Omniverse Audio2Faceのおもな機能の概要説明動画（NVIDIA）
NVIDIA Omniverse Audio2Face」で、AIを活用したフェイシャルアニメーションのデモ。
今後も、同社では3DCGにおける先進技術の導入や新たな試みを通じて、デジタルヒューマンの研究、社会実装および仮想世界における新たな価値を創造するとともに、企業のマーケティング活動に貢献していく。
コメント
株式会社サイバーエージェント 常務執行役員 内藤 貴仁氏
「GPUの発明をはじめAI領域における先駆的な取り組みをされてきたNVIDIA様と共に、3DCG市場を開拓できることを嬉しく思います。これまでにはない先進技術の導入や新たな試みを通じて、デジタルヒューマンの研究・社会実装が加速することを楽しみにしております。新たなビジネス機会の創出を目指すとともに、デジタルヒューマンの日本語発話の精度向上など日本市場ならではの研究にも取り組んでまいりますので、NVIDIA様との今後の取り組みに是非ご期待ください。」
エヌビディア 日本代表 兼 米国本社副社長 大崎真孝氏
「サイバーエージェント様と3DCG市場の拡大に向けて、協力体制を築けることを大変心強く思います。サイバーエージェント様の戦略の中核となるAIによるコンテンツ生成においてNVIDIA Omniverse、ならびにNVIDIAのAIコンピューティング プラットフォームが、これら事業に貢献できるよう協力体制を強化することとなりました。広告コンテンツの多様化、また仮想世界という媒体の活性化が進む中、両社の協業が、3DCGにおける表現の高度化、日本市場にあったコンテンツ制作に寄与し、ユーザーに新たな価値を提供ができることを期待しております。」
