リップシンク アニメーションをブレンドする

スピーチ クリップを表示するには

• リップ シンク ビューの[ミキサ]タブをクリックします。

  または

• [Ctrl]+[0]キーを押して、ミキサをフローティング ウィンドウとして開きます。

ミキサにスピーチ クリップが表示されない場合は、頭を選択し、ミキサのコマンド バーから[更新]アイコンをクリックします。

ミキサについては、「Animation Mixer の概要」を参照してください。

[スピーチ ブレンド](Speech Blend)プロパティ エディタ

1. [Speech Blend]プロパティ エディタを開きます。

   このプロパティ エディタは、スピーチ クリップを作成すると自動的に表示されますが、必要に応じて Lip Sync ビューの[Lip Sync(リップシンク)]タブで[インスペクト](Inspect) [スピーチオプション](Speech Op)を選択していつでも開くことができます。

2. [Speech Blend]プロパティ エディタで、次のオプションを設定します。

   

   A	リップ シンク ビューで表示する音素の言語を、英語と日本語の中から選択します。
   B	リップ シンク ビュー内のすべての音素で[一般]>[サイレンスの最小値]および[音素の最小値]を設定します。「サイレンスおよび音素の長さの最小値を設定する」を参照してください。
   C	適切なタブ([唇]、[顎]、または[舌])の各チャンネルを有効または無効にします。「各チャンネルを有効にする」を参照してください。
   D	適切なタブの各チャンネルで[ウェイト スケール係数]を設定します。「リップ シンク アニメーションのウェイト設定をする」を参照してください。
   E	適切なタブの各チャンネルで[時間オフセット]を設定します。「各チャンネルの時間オフセットを設定する」を参照してください。
   F	適切なタブの各チャンネルで[ブレンド]の[減衰]を設定します。「音素間でリップシンク アニメーションをブレンドする」を参照してください。
   G	適切なタブの各チャンネルで[音素タイプ]パラメータを設定します。「音素のブレンド時に口形素ポーズを保持する」を参照してください。
   H	口形素の補正シェイプを作成した場合、そのウェイトを[唇]タブの[補正シェイプ]でブレンドすることができます。「補正シェイプをグローバルにブレンドする」を参照してください。

サイレンスおよび音素の長さの最小値を設定する

[一般]パラメータは 3 つのタブで表示されますが、通常はスピーチ クリップのすべてのチャンネル(唇、顎、および舌)に適用されます。

• [サイレンスの最小値](Min(imum) Silence Length)は、ブレンドに含まれる、音素と音素の間(サイレンス)に発生するギャップの長さ(秒単位)です。

  サイレンスがここに設定した値よりも小さい場合は、ブレンド時に無視され、隣接の音素にブレンドされます。

  逆にサイレンスがここに設定した値よりも大きい場合は、(隣接の音素にブレンドする長さが計算されるとき)ブレンドのサイレンスが音素として処理されます。ただし、あまりにも長いサイレンスは長い音素としては処理されません。長いサイレンスのブレンドは、次に発生する音素の長さと、残りのブレンド量に基づいて制限されます。

• [音素の最小値](Min(imum) Phoneme Length)は、ブレンドに含まれる音素の長さ(秒単位)です。

  音素がここに設定した値よりも小さい場合は、ブレンド時に無視されます。これは、ブレンド時の短い音素でアニメーションが突然発生し、隣接の音素に合わせて徐々にイーズ イン/イーズ アウトを行う時間が十分にない場合に役立ちます。

各チャンネルを有効にする

[Speech Blend]プロパティ エディタの各チャンネルのタブ(唇、顎、および舌)の[有効](Enable)オプションを切り替えて、該当するチャンネルのアニメーション コントロールがリップシンク アニメーションに使用されているかどうかを確認します。たとえば、リップシンク アニメーションの代わりに、顎を制御するモーション キャプチャを使用する場合は、台詞の長さに合わせて顎の[有効]オプションを無効にします。

また、このオプションをアニメートして、台詞の特定のフレームのみでチャンネルを有効にすることもできます。たとえば、舌のキーフレーム アニメーションを特定の音素で使用する場合、これらの音素のフレームで舌の[有効]オプションを無効にしてキーフレーム アニメーションが優先されるようにし、リップシンク アニメーションを使用するときにもう一度有効にします。

各チャンネルの時間オフセットを設定する

[Speech Blend]プロパティ エディタ内の各タブ(唇、顎、および舌)の[時間オフセット(秒単位)](Time Offset (seconds))を設定して、チャンネルのブレンド時間をオフセットします。

たとえば、唇と顎のチャンネルのみの音声が 1/8 秒リードするように設定することができます。これにより、口形素と音声をぴったり同期させるよりも仕上がりがよくなる場合があります。または、舌のみを音声よりも 1/4 秒早く動かすことができます。

音素間でリップシンク アニメーションをブレンドする

音素を 1 つひとつ明確に発音する場合や逆にうやむやに発音する場合など、口の動きがより自然になるように音素間でリップシンク アニメーションがブレンドされる方法を変更する必要がある場合もあります(通常、人は話すときには 1 つひとつの音素を明確に発音することはありません)。これを実行するには、[Speech Blend]プロパティ エディタ内の各タブ(唇、顎、および舌)の[ブレンド]パラメータを使用します。これらのパラメータでは、各チャンネル(唇、顎、および舌)がブレンドされる音素数と、各音素で口形素のポーズがどのようにスムーズにイーズ イン/イーズ アウト(減衰)されるかを指定します。

ブレンドに使用される音素数が多いほど、口形素ポーズ間のブレンドがスムーズになります。ただし、音素数があまりに多すぎると、すべての口形素ポーズがはっきりしなくなる場合があります。音素を 1 つひとつ明確に発音する文などで口形素ポーズを適切に定義するには、この値を低めに設定しておきます。なお、逆にブレンドが十分でないと、音素間で口が何度も途切れてしまいます。

[ブレンド]の値をアニメートして、各チャンネルのブレンドをリップシンク アニメーションで変更します。

音素ごとにブレンド イン/ブレンド アウトの値を調整する

前述したようにブレンド値を設定したら、リップシンク アニメーションで各音素の開始と終了をどのようにブレンドするかを調整することができます。個別の[ブレンド イン]および[ブレンド アウト]コマンドでは、音素内の言語行動に合わせて、さらに多くのコントロールを必要に応じて使用することができます。たとえば、司令官が部隊を大声で呼ぶとき(「Atteeeen-tion!」(気をつけーっ)などの号令)、リップシンク アニメーションを最初は音素でスムーズにブレンドし、最後は短く止めます。

音素ごとのブレンド インおよびブレンド アウトの値が、[Speech Blend]プロパティ エディタのグローバル ブレンド値の上のスケール係数として適用されます。結果は常に、最初に適用したグローバル ブレンド値に依存します。たとえば、グローバル ブレンドの[前/後]の値を 2 音素に設定した場合、ブレンド イン値を 0.5、ブレンド アウト値を 2.0 に設定して、リップシンク アニメーションがその音素の 1 音素前と 4 音素後でブレンドされるようにします。

音素ごとに確認できるブレンド インおよびブレンド アウトの変化はかなり微妙です。これは、グローバル ブレンドの減衰値で最初に設定した減衰によって、音素のウェイトが急に下がるためです。

音素のブレンド時に口形素ポーズを保持する

ブレンドの前/後に高い値を設定すると、口形素ポーズによってははっきりしない場合があります。口形素によってはそれでも問題がない場合がありますが、音素を正しく認識できるように口の形を形成したほうがよい場合もあります。口形素は、「ランドマーク口形素」と呼ばれることがあります。たとえば、両唇音(M、P、および B)では、ここで P の口形素を示すように、口形素ポーズで上唇と上唇が合わさってこれらの音素と識別できるまで調整します。

唇、舌、または顎など使用する口の部分に応じて、口形素となる口の形を保持することができます。各口形素と各音素がどのように分類されて保持されるかを確認するには、現在の Viseme (口形素)ライブラリ内の[USEnglish.csv]ファイル(日本語の場合も同じ)を開きます。ライブラリの各音素は、口の全体のコントロール、顎と舌、または主に舌など、口のコントロールのタイプに応じて分類されます。たとえば、顎と舌が保護された音素では、唇のコントロールがブレンドされ、顎および舌のコントロールが常に正しいシェイプに形成されるようにできます。