本文へスキップ

Lip Sync レビュー:撮り直さずにクリップの声を変える

すでに映像があって同じ口から新しいセリフを出したいだけなら Lip Sync。安定した単一ショットでない映像は直せない。

  • 軽め · テストの中で最も軽いプロンプト

  • 中程度 · フィルターのあるモデルが断り始める地点

  • 強め · 中間の段階。順位を付ける前に必ずテストします

  • かなり強め · 多くのモデルが手加減し始める地点

  • 最大 · 尺度の最上段。A 区分と B 区分の 2 つに分けて採点

料金
—
所要時間の中央値
1.5 分
成功率
データ収集中

Lip Sync はファイル 2 つ、video_url と audio_url を受け取り、クリップ内の人物の口の周りだけを新しい音声に合わせて描き直します。演技、光、フレーミングは撮影されたまま残り、解像度は最大 720p を維持され(それより大きい映像は約 720p で返ってきます)、結果には新しい音声トラックが乗ります。価格は出力 1 秒あたり $0.012——10 秒の声の差し替えは $0.12 です。

結論

出力の長さは元のクリップではなく音声に従います。音声より短いクリップはループされてその長さをカバーするので、安定した単一ショットの映像が最もきれいな結果になります。このエンドポイントではまだコンテンツ段階のテストを実施していないため、当社のどの段位でどう振る舞うかは報告できません。

Lip Sync を試す →

主なデータ

  • コンテンツ段階: このエンドポイントではまだテストしていない。
  • スコア: これまでに追加した実行データはこのページのスコアカードを参照。
  • 価格: 出力 1 秒あたり $0.012。
  • 仕様: 解像度は最大 720p を維持、それより大きい元映像は約 720p で返る。出力の長さは音声に一致し、短いクリップはループしてカバーされる。
  • 出典: 採点ルールはレビューの評価方法、全パラメーターは Lip Sync モデルページにある。

良かった点と足りなかった点

良かった点

  • 変わるのは口だけ。 演技、光、フレーミングは元のクリップから引き継がれ、ショット全体を再レンダリングすることはなく、口の周りだけが新しい発話に合わせて描き直されます。
  • 2 フィールドの呼び出し。 必要なのは video_url と audio_url だけで、プロンプトもマスクもスタイル設定も不要です。
  • 短いクリップは自動でループされてカバーされる。 映像が新しいセリフより短い場合、リクエストを失敗させるのではなく、音声の長さに達するまでループします。
  • やっていることの割に安い。 1 秒 $0.012 なら、丸 1 分の声を差し替えた映像は $0.72 で済みます。
  • 可能な限り解像度が維持される。 720p 以下の映像はさらに縮小されず、そのままの解像度が保たれます。

足りなかった点

  • 安定した単一ショットでないクリップは難しいケースになる。 このエンドポイントは、ほぼカメラを向いたはっきり映る顔 1 つを前提に作られています。カット、カメラの動き、話者が長時間横を向くことはうまくいきません。
  • 短いクリップのループは新しい映像ではなく動きの繰り返しになる。 元のクリップが新しい音声よりかなり短いと、ループの繰り返しが目に見えて分かります。
  • 720p を超える解像度は下げられる。 それより大きい元映像は、元のサイズではなく約 720p で返ってきます。
  • 元の音声のバックグラウンドノイズは分離されない。 新しい audio_url に音楽が入っていないクリアな発話であれば、モデルにとって同期の手がかりが最も明確になります。
  • このエンドポイントについてまだコンテンツ段階のデータがない。 どちらの方向にも決めつけず、未解決の問いとして扱ってください。

テストしたこと

Lip Sync ではまだコンテンツ段階のテストを実施していないので、このセクションでは採点済みの実行結果ではなく、スキーマと公開されている 1 つの作例から確認できる内容を報告します。この作例は、画面に女性 1 人が映る 5 秒の夜行列車のショットを取り上げ、約 4.5 秒の発話で声を差し替えています——クリップの長さが新しい音声に近く、このエンドポイントが想定するケースです。

このクリップの長さと音声の長さの一致は、ワークフローを組む上で意識する価値があります。両者が近いと、モデルはセリフ全体を通じて口の形を描くための連続した映像を持てます。音声がクリップよりかなり長いと、ループの繰り返しがそのギャップを埋めることになり、原因を知らなくても視聴者はその繰り返しに気づきます。複数のセリフのシリーズを予定しているなら、ループに差を埋めさせるより、元のクリップをそれぞれのセリフの長さにおおよそ合わせて切り詰めたり伸ばしたりするほうが安上がりです。

Lip Sync は入力として必要とするものの点で、このページの他の 2 つのツールの中間に位置します。すでに存在する映像が必要なので、静止したポートレートには使えません——それは Talking Avatar の役目です。そして口にしか触れないので、サイレントクリップに環境音や効果音を加えることには使えません——それは Video Sound Effects の役目です。完全に声を差し替えた場面のための自然なパイプラインは、まず映像を撮影または生成し、新しいセリフを別途録音または合成し、その両方を最後の工程としてこのエンドポイントに持ち込むことです。

代わりの選択肢

  • 既存の映像ではなく静止したポートレートから始めたい? Talking Avatar は、すでにある映像の声を差し替えるのではなく、写真をアニメ化して音声を話させます。1 秒 $0.018。
  • 新しい声のトラックではなく効果音が必要? Video Sound Effects は発話を同期させるのではなく、映像から環境音と効果音を生成します。1 秒 $0.0012。

Lip Sync はどこまで描けるか

各段階を、タスクごとに確認済みの結果で示します。内容が実際に出たときだけ点数が付き、1 回の実行では最大 60% です。

段階・タスク別の Freedom 点数
段階リップシンク
軽めテストの中で最も軽いプロンプト
1 回中 1 回生成12.0 / 20 点
中程度フィルターのあるモデルが断り始める地点
1 回中 1 回生成12.0 / 20 点
強め中間の段階。順位を付ける前に必ずテストします未テスト
かなり強め多くのモデルが手加減し始める地点未テスト
最大尺度の最上段。A 区分と B 区分の 2 つに分けて採点未テスト
タスクのスコア残りが通った場合の範囲:24.0~100.02026年10月5日 にテスト

2026年10月5日~2026年10月5日 にテスト

このサイトは職場でも安全に閲覧できる内容に保っています。結果は文章で伝え、表示する画像にはモザイクをかけ、テスト用プロンプトは決して公開しません。未成年に見える人物、実在の人物の容姿、同意のない状況は決してテストしません。

テスト記録をすべて見る →規制なしランキングを見る →

自分のプロンプトで、どこまで出るか試す

Lip Sync の Spicy Index の内訳

各項目から採点の詳細に進めます。点数がどの行から来たのか、なぜ減点されたのかがわかります。

公開リーダーボード 品質の 45%
未テスト

追跡している公開リーダーボードに、完全に一致するエントリーはまだありません。 仕組み

ブラインド出力テスト 品質の 35%
65.6
アリーナの品質 品質の 20%
未テスト

ブラインド票が 100 票以上、95% 区間が 200 Elo 未満になると加わります。 仕組み

機能 重み 10.5%
未テスト

まだ採点していません。 仕組み

Freedom Score 重み 30%
未テスト

自由度が未測定、または証拠が不十分です。Index は元の品質・機能スコアを維持し、暫定表示で順位に含めます。証拠の欠如を 0 点とは扱いません。 仕組み

自由度が未測定、または証拠が不十分です。Index は元の品質・機能スコアを維持し、暫定表示で順位に含めます。証拠の欠如を 0 点とは扱いません。

テストレポートをすべて見る →

SpicyAPI で Lip Sync にできること

SpicyAPI の現在のモデル仕様から直接取得しています。開発元が自社アプリでより多くの機能を提供している場合もありますが、ここに載っているのは現在当社の API から呼び出せる機能です。

エンドポイント別の機能
機能リップシンク
ネイティブ音声なし
シード指定なし
ネガティブプロンプトなし
すべてのパラメーターとコード例を見る →

実際にかかる時間

過去 30 日の実際のジョブで、リクエストから完成までを計測しています。所要時間には当社自身のテスト実行も含みます。

所要時間の中央値
1.5 分
90 パーセンタイル
3.4 分
動画 1 秒あたりの待ち時間
データ収集中
成功率
データ収集中

完了したジョブが 10 件以上そろうと所要時間を表示します。成功率はお客様のジョブだけで数え、30 日分のトラフィックがそろうまで全モデルで非表示にしています。

Lip Sync の代わりに検討できるモデル

あなたの意見は?

このレビューは役に立ちましたか?

投票するにはログインしてください。

コメント

コメントは自動チェックと当社チームによる確認を経ています。スパム、不適切な内容、個人攻撃、実在の人物の名前を同意なく挙げる投稿は削除します。コメントを報告いただければ、1 営業日以内に確認します。

このモデルを試しましたか?うまくいった方法を共有してください。スパムを防ぐため、コメントには無料アカウントが必要です。

Lip Sync のよくある質問

Lip Sync を自分で試す

プレイグラウンドで全パラメーターを設定し、実行前に正確な料金を確認できます。

ほかのレビュー

ランキングを見る →
  • 暗いホームシアターで後ろ姿のカップルが、壁一面のスクリーンに映る鮮明な波を見つめている

    Video Upscaler

    公開前にクリップをより大きなサイズ帯で納品したいなら Video Upscaler。速くレンダリングできるサイズで生成し、残す1本だけをアップスケールすること。

    Spicy Index
    56.3
    Freedom Score
    56.0

    2026年9月27日 にテスト

    レビューを読む
  • 流れる彫刻的なリボンと真鍮の映画用絞り

    Talking Avatar

    静止したポートレートを自分の音声でしゃべらせる、速くて安い方法が欲しいなら Talking Avatar。全身の動きや長尺の動画には向かない。

    Spicy Index
    68.5

    2026年9月27日 にテスト

    レビューを読む
  • 象牙色のカチンコと彫刻的な深紅のリボン

    Video Sound Effects

    サイレントクリップに安く環境音と効果音を加えたいなら Video Sound Effects。セリフや音楽トラックは書けないので別途用意すること。

    Spicy Index
    —
    Freedom Score
    52.0

    2026年9月27日 にテスト

    レビューを読む