主な特徴
使える場面
- ライブコマース向けのデジタルアナウンサー
- 授業を担当するバーチャル講師
- ソーシャルアプリ向けのAIコンパニオン
使い方
- 1 POSTリクエストでセッションを作成する
- 2 AliRTCチャネルに参加する
- 3 WebSocket制御チャネルを開く
- 4 ハートビートと課金状況を追跡する
こんな方におすすめ
メリット
- ほぼリアルタイムで反応できる
- SDKに縛られずトライアルクレジットを試せる
- 音声とキャラクターの選択肢が幅広い
制限事項
- 開発者向けAPIなので、組み込み作業が必要
- トライアルクレジットには上限があり、その後は秒単位で課金される
- RTCとWebSocketの設定には学習コストがある
- 比較的新しいAPIなので、本番利用前に十分な検証が必要
ViduS1 API とは
ViduS1 APIは、リアルタイムで対話するデジタルヒューマン向けのストリーミング動画生成モデルです。事前に文章を入れて動画を書き出すテキストから動画への変換ツールとは異なり、会話の場で映像を生成します。そのためキャラクターはユーザーの声や入力を見聞きし、ほぼリアルタイムで返答できます。長さを固定的に想定しない対話に対応し、音声、テキスト、動画を同じセッションで扱えるマルチモーダル入力と、高解像度の出力を備えています。50種類のプリセット音声が用意され、実在人物、アニメの登場人物、ペットのようなキャラクターまで定義できます。新規ユーザーには1000の無料トライアルクレジットが与えられ、SDKに縛られずに試せます。ただし開発者向けAPIであり、実際に使うには接続作業が前提になります。
できること
- ユーザーとほぼリアルタイムで会話するデジタルヒューマンを作る。
- 50種類のプリセット音声から選ぶか、独自のキャラクターを定義する。
- 一つのセッションで音声、テキスト、動画の入力を扱う。
- 1分から2時間程度の対話を想定して動かす。
- ソーシャル、EC、ゲーム、教育の製品に展開する。
こんな人に向いています
- 対話型のアプリやサービスを開発するエンジニア。
- ライブコマースにデジタルホストを置きたいECチーム。
- 授業にバーチャル講師を追加したい教育プラットフォーム。
- ユーザー向けのコンパニオンキャラクターを作るソーシャルアプリ。
注意点
この製品は開発者向けツールなので、APIの扱いに慣れている必要があります。POSTリクエストによるセッション作成、AliRTCチャネルへの参加、WebSocket制御チャネルの接続が含まれ、設定には一定の学習コストがあります。無料トライアルは1000クレジットで、その後は秒単位の課金となるため、セッションが長いほど利用費は増えます。本人の同意なく実在人物の外観や声に似せたキャラクターを使うと、学校やプラットフォームの規定に違反する可能性があり、結果は利用者が負います。APIは比較的新しいため、本番環境で使う前に安定性と挙動を十分に確認してください。サービスが成熟する過程で仕様が変わる可能性もあります。
よくある質問
無料トライアルはありますか?
はい。新規ユーザーはSDKに縛られずに1000クレジットを受け取れます。
テキストから動画を作るツールとどう違いますか?
会話が行われている間に動画を生成する点が異なります。
何を接続すればよいですか?
HTTPリクエスト、AliRTCチャネル、WebSocket制御チャネルを接続します。
無料で使える理由
公式ページの記載内容: 無料トライアル
無料の上限、トライアル期間、機能は公式サイトが決定し、いつでも変更される場合があります。
製品プレビュー
一覧ページから保存したスクリーンショットです。プレビュー専用です。