アリババ未来生活研究所

HappyHorse 1.0 — ネイティブオーディオ付きビデオ

シングルパスで画像、モーション、サウンドを生成する 150 億パラメータのビデオ モデル。シーンを作成し、参照をドロップし、リップシンクダイアログを含む映画のようなクリップを取得します。

HappyHorse 1.0 で作成する

テキストからビデオ、画像からビデオ、およびビデオへの参照 - ネイティブ オーディオが含まれます。 720p または 1080p で 3 ~ 15 秒のクリップを生成します。

0 / 2500

3s

3~15秒

必要なクレジット:150

サンプルビデオ

(生成されたビデオ結果がここに表示されます)

ほとんどのビデオ モデルは最初に画像を生成し、後でサウンドを追加します。 HappyHorse 1.0 は、テキスト、ビデオ、オーディオを 1 つのストリームにエンコードします。そのため、ドアのクリック音、暴風雨、セリフが同じ瞬間に属します。

HappyHorse 1.0 が優れている理由

画像と音声のワンパス

画像と音声のワンパス

15B トランスはテキスト、ビデオ、オーディオを同時に処理します。唇の動きと音声は音素レベルで一緒に作成されます。事後的につなぎ合わせられるものではありません。

保持する主体のアイデンティティ

保持する主体のアイデンティティ

顔、ワードローブ、製品は、どのような動きをしても一貫性を保ちます。ビデオへの参照では、キャラクターまたは SKU がクリップの途中で漂わないように、最大​​ 9 つのビジュアル アンカーをロックできます。

ディレクターのプロンプト言語

ディレクターのプロンプト言語

ショットのサイズ、カメラの動き、タイミング、サウンドのデザインについて説明します。 HappyHorse 1.0 は、「3 秒以上かけてゆっくり押す、暖かい窓の光」を気分ではなく構造として扱います。

ブラインド比較で実証済み

ブラインド比較で実証済み

Artificial Analysis Video Arena では、HappyHorse 1.0 は、テキストからビデオへの変換と画像からビデオへの変換の両方で、モデル名が見えない人々によって判断され、トップのビデオ モデルにランクされました。

HappyHorse 1.0 は、同じバックボーン上のビデオ ワークフロー ファミリです。すでに持っている資産と一致するエントリ ポイントを選択してください。

生成する 4 つの方法

単に実験するだけでなく、短編動画を配信する人向けに構築されています。人間中心のパフォーマンスが重視されており、顔、音声、製品はタイムラインに沿って保持する必要があります。

HappyHorse 1.0 の対象者

クリエイターと映画制作者

クリエイターと映画制作者

別の音声パイプラインを使用せずに、ショットをブロックし、カメラ言語を試し、多言語ダイアログを生成します。アニマティクス、ソーシャル フィルム、ルック デベロップメントに役立ちます。

ブランドチームとキャンペーンチーム

ブランドチームとキャンペーンチーム

静止しているヒーローを動きに変えて、同じ才能や製品をバリエーション間で一貫性を保ちます。コンセプトラウンドには十分な速さ、有料プレースメントには十分な鮮明さ。

Eコマースと製品ビデオ

Eコマースと製品ビデオ

カタログ写真をアニメーション化し、参照を使用して SKU の外観をロックし、同じ世代にアンビエントまたはナレーション対応オーディオを追加します。

プロンプトから再生可能なクリップまで

HappyHorse 1.0 は、16:9、9:16、1:1、4:3、および 3:4 で最大 1080p、3 ~ 15 秒を出力します。このページで生成 — 別のオーディオ ツールは必要ありません。

生成を開始する

150 億パラメータの 1 つのシステムがあらゆるワークフローを強化します。人間の被写体を主なデザインターゲットとして、ビジュアルとオーディオが一緒に生成されます。

HappyHorse 1.0 の機能

ビデオとオーディオの共同生成

画像、動き、音声、雰囲気は同じ前方パスから生まれます。ドアが閉まるのとそのクリックは 1 つの決定であり、2 つのパイプラインではありません。

音素レベルのリップシンク

口の形は言葉だけでなく音声にも影響します。 6 か国語にわたるトーキングヘッドとプレゼンターのクリップに優れています。

画像からビデオへの最初のフレームのロック

あなたの静止画が正確な開始フレームになります。動きは継続し、重量、視線、製品の幾何学形状は信じられないままです。

複数参照のアイデンティティ制御

最大 9 つのリファレンスでキャラクター、衣装、製品をピン留めできるため、一連のクリップが視覚的に整列した状態を保つことができます。

ショットを意識したプロンプト

ワイドオープン、タイミングを決めたプッシュ、サウンドノートはショット構造として解釈され、一般的なムードプロンプトよりも監督のブリーフに近いものになります。

実稼働対応の出力サイズ

720p または 1080p、3 ~ 15 秒、フィード、ストーリー、ヒーローの配置の横向きと縦向きの比率。

探索を続けてください

このページで生成したり、プランを比較したり、プラットフォーム上の他のモデルを続行したりできます。

HappyHorse 1.0 よくある質問

このページには、HappyHorse 1.0 について公開されている情報がまとめられています。当社はアリババとは提携していません。