Vidu S2：リアルタイムでインタラクティブに編集できる空間動画生成

1. Vidu S2は業界をリードするリアルタイム・インタラクティブモデルです。Vidu S2-Avatarによるリアルタイム動画アバター生成と、Vidu S2-Editingによるリアルタイム動画編集に対応しています。 2. Vidu S2-Avatarはリアルタイムの音声インタラクションと複雑なモーションコントロールに対応しています。さらに、参照画像を使用することで、オブジェクトとのインタラクション、衣装の変更、背景の切り替えなども実現できます。 3. Vidu S2-Editingはスタイル、衣装、被写体、背景の参照画像に基づいて、入力動画ストリームをリアルタイムで連続編集できます。 4. さらに、Vidu S2は非同期生成にも対応しています。1枚の画像と音声クリップからアバター動画を生成できます。

1. 映像品質を改善し、対応解像度を480pから720pにアップグレードしました。 2. 指示追従性能を向上させ、音声指示でアバターのダンスモーションを操作できるようになりました。

1. Vidu S2-Avatarはリアルタイムインタラクションを実現します。アバターはユーザーとリアルタイムに会話でき、会話への割り込みと双方向の知覚にも対応しています。音声入力からレンダリングまでの一連の処理をリアルタイムで行えます。 2. Vidu S2-Editingはストリーミング動画編集を実現します。動画ストリームを継続的に受信し、編集結果をリアルタイムで出力でき、ストリームを中断することなく、途中で参照画像やシーンを切り替えられます。

1. オンラインアバターは、ユーザーとリアルタイムで会話でき、会話中いつでも割り込むことができ、双方向の知覚にも対応しています。 2. オフラインアバターは非同期生成に対応しています。キャラクター画像と音声クリップまたはテキストから、リップシンクとモーションを同期させた会話動画を生成できます。

Vidu S2-Editingはカメラ、動画、画像の3つの入力モードに対応しています。カメラを有効にするか入力ソースを選択すると、スタイル、衣装、被写体、背景の参照画像を使って入力動画ストリームをリアルタイムで編集し、編集結果を出力できます。

アバターとのインタラクティブなライブ配信中に、参照画像と指示を入力できます。参照画像には、オブジェクト、衣装、背景の3種類があります。参照画像と指示に基づいて、さまざまなインタラクションをリアルタイムで実行できます。たとえば、アイテムを手に取って見せたり、参照画像の衣装を着たり、背景を置き換えたりできます。

当社のAPIプラットフォームと連携できます：https://platform.vidu.com/vidu-stream/doc