アニメのキャラクターやビデオにリアルな会話を追加したいと思ったことはありますが、手動で口パクするプロセスは面倒だと感じたことはありませんか? ピカのリップシンクはすべてを変えることができます。 この革新的な AI を活用した機能を使用すると、ビデオの同期した唇の動きを簡単に生成でき、ビデオをより魅力的で信頼できるものにすることができます。
OpenAI の画期的な Sora AI ビデオ ジェネレーターは、今のところ一般には公開されていないかもしれませんが、ライバル各社は独自の革新的な機能を開発して前進しています。 Pika は、有料加入者向けの新しいリップ シンク機能を開始するという大きな動きをしました。
このエキサイティングな開発は、従来の映画製作と映画の見方を再構築する可能性を秘めています。 ナキウサギX のビデオ、Pika のリップシンク機能がポイントです!
最近、AI が生成したビデオについて多くの話題があったことは承知しています。 さて、今誰が話しているのか見てみましょう！
Pro ユーザーはリップ シンクへの早期アクセスを https://t.co/nqzjGy82Lx で利用できるようになりました。 pic.twitter.com/vCJ88pUWLL
— ピカ (@pika_labs) 2024 年 2 月 27 日
ピカリップシンクとは何ですか？
イレブンラボの最先端の生成オーディオ技術を活用した Pika Lip Sync を使用すると、ユーザーは AI で生成されたビデオにリアルな会話を追加できます。 ダイアログとアニメーションの唇の動きをシームレスに一致させ、キャラクターの口が音声と完全に同期するようにします。
Pika リップ シンクは、テキストからオーディオへの変換とアップロードされたオーディオ トラックの両方をサポートします。 スクリプトを入力するか、録音済みのナレーションをアップロードするかに関係なく、キャラクターやプロジェクトのスタイルに合わせて音声をカスタマイズできます。 現在、アクセスは Pika Pro ユーザーと Pika の「スーパー コラボレーター」プログラムのメンバーに限定されています。
Pika Lip Sync はどのように機能しますか?
Pika リップ シンクは、複雑な機械学習モデルを活用してオーディオ ファイルを分解し、音声の基本単位である音素を認識します。 これらの音素は対応する口の形と動き (口形素) にマッピングされ、オーディオ トラックに一致するシームレスなアニメーションが作成されます。
ピカリップシンクの使い方
Pika Lip Sync を使い始めるためのステップバイステップのガイドは次のとおりです。
- キャラクターを作成またはアップロードする: Pika の AI アート ツールでキャラクターを生成するか、既存の画像をアップロードして開始します
- 音声をアップロードまたは録音する: 録音済みのオーディオ ファイル (ナレーションや歌など) をアップロードするか、Pika インターフェイス内でオーディオを直接録音します。
- ピカリップシンクを適用する: Pika リップシンク機能を見つけて選択します。 キャラクターの唇は、アップロードされたオーディオに基づいて自動的にアニメーション化されます。
必要に応じて設定を微調整し、新しくアニメーション化されたビデオをエクスポートします。
AIからハリウッドへ
Pika の AI 生成ビデオは、Sora や Runway と比べると絶対的なフォトリアリズムという点ではまだ道が遠いかもしれませんが、リップ シンクの追加により破壊的なエッジが与えられます。 Pika は、間もなくハリウッドで見られるであろう、より長い物語性のある AI 映画を作成する際の大きなハードルに取り組んでいます。
以前は、ポストプロダクションで話し言葉やリアルな唇の動きを追加するには、面倒なサードパーティ製ツールが必要になることがよくありました。 Pika リップ シンクはこのプロセスを合理化し、AI を活用した長編映画の可能性を変革します。
しかし、革新しているのはピカだけではありません。 今週、Runway はマルチ モーション ブラシ機能を更新し、ユーザーがビデオ内のオブジェクトに独立したモーションの方向を適用できるようにし、モーションの選択を容易にする自動領域検出を追加しました。 これは、すべての AI ビデオ生成ツール全体の急速な進歩を浮き彫りにしています。
ディープフェイクの危険性を忘れるな
Pika Lip Sync などのツールを使用してリアルなビデオを簡単に作成できるため、ディープフェイクに関する深刻な倫理的懸念が生じます。 ディープフェイクは合成メディアであり、多くの場合はビデオであり、人物の肖像を操作して、その人が本来していないことを言ったり行動したりするものです。 このテクノロジーは創造的で楽しい用途に使用できますが、暗い側面もあります。
最近のボビー・アソフのリークは、ディープフェイクが同意なしに使用された場合の潜在的な危険性をはっきりと思い出させてくれます。 これらの操作されたビデオは重大な苦痛を引き起こし、標的となった人々の評判と精神的幸福の両方に悪影響を及ぼしていることが浮き彫りになりました。 ディープフェイクは、誤った情報を広めたり、復讐や嫌がらせを目的としたり、同意のない搾取的なコンテンツを作成したりするために使用される可能性があります。
ユーザーがビデオ操作に AI を使用することに伴う倫理的責任と潜在的な危害を認識することが重要です。 このテクノロジーの力は、透明性と説明責任を持って使用する必要があります。 クリエイターもプラットフォームも同様に、悪用を積極的に防ぐためのガイドラインと安全対策を考慮する必要があります。 これには、ディープフェイクのリスクについてユーザーを教育することや、操作されたコンテンツを検出してフラグを立てるツールの開発が含まれます。
注目の画像クレジット：フリーピク。
