FF7

FF7リメイク、唇の動きはAIが自動でつけていた!脚本にない声優のアドリブ演技にも対応。CEDEC2022で開発者が詳細を講演

ゲーム開発者カンファレンスCEDEC2022でFF7リメイクの唇の動きについての講演が行われました。 FF7リメイクでは、キャラクターの会話シーンではボイスに合わせて唇が動いているわけですが、それをどうやって実現していたのか?について、かなり専門的な内容での講演となっており、ファミ通に大量のスライドとともにレポート記事があがっています。

台詞に合わせて唇を動かす「リップシンク」と呼ばれる技術は、太古の昔よりありますが、FF7リメイクのようなフルボイス作品ではとにかくシーンとキャラクターの物量が多くて手動で一文字一文字設定していくのは無理。 そこで、従来の開発では脚本に書いてあるテキスト文から自動的に唇の形を生成するツールを開発して、それでやっていたそうなのですが、大きな問題が。

それは、脚本になりセリフを声優さんがしゃべる「アドリブ」に対応できないこと。脚本にはない「呼吸音」にも対応できないし、さらに「七番街」を「ななばんまち」と読み間違えてしまったり、固有名詞や単語の辞書登録も増えまくることに…。こんな問題を解決すべく、FF7リメイクでは、声優さんがしゃべった音声をもとに唇のモーションを自動生成するAIを開発したそうです!

音声をディープラーニングの定番である畳み込みニューラルネットワークで学習し、抽出した特徴量を唇のアニメーションと対応付けて覚えさせていくというもの。AIはまず学習のための訓練データが豊富にないといけないのですが、幸いにしてFF7リメイクでは3時間半の収録ボイスとそこに対してのリップシンクアニメーションがあり、それを使って行うことができたとのこと。

AI開発自体はテクノロジー推進部やAI部が行い、開発プロジェクト側と連携して作業に当たったそうですが、こうした手法がとれるのもスクエニのように大きな会社でAI専門チームがいるからですよね。現代のAAAタイトルはとにかく用意しなければならないデータの物量が膨大で、AIに自動生成させるのが不可欠になってきています。その一端を垣間見れる貴重な講演ですね!

ピクセルリマスターFF6のオペラ試作開発には、『ドラクエビルダーズ』を使った! CEDECで開発秘話が紹介前のページ

今なおスクエニの25%を握るオーナー、福嶋名誉会長インタビュー。寿司事業⇒住宅情報誌⇒ドラクエ⇒合併と激動の人生を語る次のページ

関連記事

  1. FF7

    PS4/5/Switch「クライシス コアFF7」公式通販で限定版の予約が開始!

    12月13日の発売日が発表されたリマスター版のクライシスコアFF7です…

  2. FF7

    クライシスコアFF7リマスターは12/13発売、「シアトリズム ファイナルバーライン」発表、「オクト…

    ニンテンドーダイレクトで一気にスクエニ作品の発表が相次ぎました!ク…

  3. FF7

    猫に定評があるFF7リメイク、猫アレルギーの開発者が鼻炎薬を飲んで猫カフェに取材していた!

    毎週金曜日の更新がすっかり定着したFF7リメイクの裏話ブログですが、今…

  4. FF7

    FF7の米国発売25周年で、マクドナルドやウォルマート、Windowsなど公式Twitterがノリノ…

    9月7日で北米版FF7の発売から25周年となったことを記念するツイート…

  5. FF7

    8月25日、東京スカイツリーがFF7の魔晄色にライトアップ! 一夜限定

    東京スカイツリーがこれまでのコラボ企画でのライトアップを復刻する開業1…

コメント

  • コメント (3)

  • トラックバックは利用できません。

    • 匿名
    • 2022年 8月 28日

    UE4で作ってても色んな自社技術投入してゲーム作ってるんだなぁと思いました
    技術といえば、7とは関係ないけどGCで発表されたフォースポークンの動画見ましたか?
    とんでもないクオリティなんで、あれも記事にしてほしいですねぇ…FF17作るならルミナスにアグニズフィロソフィーで作ってほしい

    • 匿名
    • 2022年 8月 28日

    これも大きな財産だよな…

    • 匿名
    • 2022年 8月 28日

    テーマともサイトとも関係ないけど、カプコンとコナミとフロムが合体したら、スクエニのようなデカイことができるのにね。会社の業績としては、カプコン連合よりスクエニのほうが下かもしれんが、PS5が自家用ジェット機のような大きな夢を追いかけてるのに、勿体ない。機会の損失だと思うけどね。

最新ニュース

Amazon.co.jp


売り上げランキング
/ Kindle本 / 音楽 / DVD / ゲーム
デジタル製品 / おもちゃ

カテゴリー

  1. アッシマータイル

    管理人日記

    深夜の来訪者
  2. SQUARE ENIX

    FF30周年記念、東京タワーの「クリスタルタワー」ライトアップ&プロジェクション…
  3. FF15

    9月30日発売!FF15の映画+アニメのブルーレイ「FF15フィルムコレクション…
  4. 管理人レポート(スクエニ以外)

    MacBook Proのメモリを増設する方法 わかりやすい解説
  5. ニューイングランド音楽院

    SQUARE ENIX

    日記:米ボストンで開催されたFFの室内楽コンサート「A New World」に行…
PAGE TOP