CRI ADX LipSyncは、ディープラーニングによる音声解析技術を活用し、音声データから自然な口パターンを自動生成する音声解析リップシンクミドルウェアです。
ゲーム内の会話シーンやバーチャルキャラクターのライブ配信など、様々なコンテンツに手軽に利用することができます。
■音声データから自然な口の動きを自動で生成
ADX LipSyncは入力された音声データの波形を解析し自動で適切な口の動きを生成します。また、口の形だけでなくマ行・バ行・パ行などの両唇音を発音する際はいったん唇を閉じるなどの口の開閉まで、実際の発音に即した口パターンを再現することができます。
生成した口パターンは様々なモデルデータに組み込みやすい形式で出力され、2D/3Dモデルの両方に活用することができます。
■多言語対応
ADX LipSyncは日本語のみならず、あらゆる言語で口パターンを生成することができます。日本語、英語、中国語などの複数言語でワールドワイド展開するタイトルの開発を大幅に効率化します。
■歌唱にも対応
通常の会話だけでなく、歌唱音声にも利用することができます。
デモ動画を掲載しますので是非ご覧ください。
