音声と映像を同時に生成、口の動きも自動同期!ByteDanceの最新AI動画モデル「Seedance 1.5 Pro」が”genas.ai”に登場

AIツール・サービス紹介

AI動画生成プラットフォーム「genas.ai(ジェナス)」は、TikTokを運営するByteDance(バイトダンス)が開発した最新のAI動画生成モデル「Seedance 1.5 Pro」を日本市場向けに導入し、2025年12月25日より提供を開始しました。この新しい技術により、音声と映像を同時に作り出し、キャラクターの口の動き(リップシンク)を自動でぴったり合わせることが可能になります。

genas.ai × Seedance 1.5 Pro

genas.aiのページはこちらです:
https://genas.ai

Seedance 1.5 Proとは?「音声と映像の同時生成」で動画制作が変わる

これまでのAI動画生成は、まず映像を作り、その後に音声を加える「カスケード方式」が主流でした。この方法だと、口の動きと音声がずれてしまったり、映像と音声が合わなかったりすることが多く、後から手作業で修正する必要がありました。

Seedance 1.5 Proは、この課題を解決するために「デュアルブランチ拡散トランスフォーマー(DB-DiT)」という特別な技術を使って、映像と音声を同時に生成します。これにより、動画のコマ(フレーム)ごとに音声と映像が完璧に同期し、とても自然な動画が作れるようになりました。

Seedance 1.5 Proの主な特徴

1. ミリ秒単位で口の動きがぴったり合う

音声と映像を同時に生成するため、話している内容(音素)と口の形がミリ秒単位で正確に同期します。これにより、AIが作ったとは思えないほど自然な会話シーンが実現し、不自然さが解消されます。

2. 日本語を含む8言語以上に対応

日本語はもちろん、英語、中国語(方言含む)、韓国語、スペイン語など、8つ以上の言語にネイティブ対応しています。それぞれの言語特有の音の並び(音素)に合わせて、口の動きを正確に調整できます。
これにより、多言語の広告や、海外向けのコンテンツを、撮影なしで手軽に制作できるようになります。

3. 映画のようなカメラワークをAIが自動で実現

プロンプト(指示文)に書き込むだけで、まるで映画のようなプロフェッショナルなカメラワークをAIが自動で生成します。

  • ドリー・ズーム(ヒッチコック・ズーム)

  • ロングトラッキングショット

  • パン・ティルト・オービット

  • クローズアップから全体へのダイナミックな切り替え

といった多様な表現が可能です。

4. 物語の一貫性を保つ「セマンティック理解」

プロンプトに書かれた内容を深く理解し、複数のシーンにわたって登場人物の感情、表情、行動の一貫性を保ちます。ショートドラマや広告動画など、物語性のあるコンテンツ制作に特に役立ちます。

5. セリフ、効果音、環境音、BGMもまとめて生成

キャラクターのセリフだけでなく、風の音や雨の音、街の騒音といった環境音、効果音、そしてBGMまで、シーンに合わせてAIが自動で生成します。プロンプトで「明るいシンセポップ」「陰鬱なピアノ」といった具体的なBGMの指定も可能です。

genas.aiでSeedance 1.5 Proを利用するメリット

1. 日本語で手軽に利用開始

genas.aiは日本語の操作画面を提供しているため、海外のサービスに登録したり、複雑な設定をしたりすることなく、すぐにSeedance 1.5 Proの機能を利用できます。

2. 既存機能との連携でさらに高度な動画制作

genas.aiの既存機能と組み合わせることで、より効率的で質の高い動画制作が可能です。

  • AI画像生成: 動画に登場するキャラクターや背景の素材を作る

  • Seedance 1.5 Pro: 音声付き動画を一気に生成する

  • Upscale Pro: 作った動画を4K/8Kの高画質にする

  • Video Extension: 動画の長さを延長する

3. 動画制作の作業工程を大幅に削減

これまでは、「動画生成 → 音声生成 → 口の動き同期 → 手動調整」と多くの工程が必要でした。
Seedance 1.5 Proを使えば、プロンプトを入力するだけで、口の動きが合った音声付きの動画がすぐに完成します。これにより、制作にかかる時間やコストを大幅に減らすことができます。

Seedance 1.5 Proの活用シーン

この新しい技術は、さまざまな分野での動画制作に活用できます。

  • ショートドラマ・ショートアニメ制作: セリフ付きの完成動画を短時間で作成できます。

  • 多言語広告・プロモーション動画: 撮影をやり直すことなく、複数の言語に対応した動画を展開できます。

  • AIプレゼンター・解説動画: 自然な話し方と表情で、AIがプレゼンテーションや解説を行います。

  • ラグジュアリーブランドの商品動画: 映画のようなカメラワークで、商品の高級感を際立たせる動画を制作できます。

  • SNSバイラルコンテンツ: 縦型ショート動画を短時間でたくさん作り、SNSでの拡散を狙います。

Seedance 1.5 Proの技術的な詳細

  • 技術の仕組み: デュアルブランチ拡散トランスフォーマー(DB-DiT)/ 45億パラメータ

  • 出力できる動画の画質: 1080p HD / 720p

  • 動画の長さ: 2秒から12秒

  • 動画の縦横比: 16:9(横長)/ 9:16(縦長)/ 1:1(正方形)

  • 対応している言語: 日本語、英語、中国語(北京語・広東語・四川語など)、韓国語、スペイン語、ポルトガル語、インドネシア語など

  • 音声の生成: セリフ、環境音、効果音、BGMを同時に生成

  • 動画の作り方: テキストから動画を生成(Text to Video)/ 画像から動画を生成(Image to Video)

genas.ai サービス概要

genas.aiは、ショートドラマやショートアニメ制作を効率的に行えるAI動画生成プラットフォームです。

NIUSIA AI STUDIO

株式会社ニュウジアは、AI技術の研究開発、コンサルティング、映像制作、AIソリューション販売などを手がけています。日本の現場に合わせた「使えるAI」の基盤を提供し、安心して利用できるAI映像の標準化を目指しています。

NIUSIAロゴ

会社概要

  • 会社名: 株式会社ニュウジア

  • 設立: 2008年12月

  • 代表取締役: 柏口之宏

  • URL: https://www.niusia.co.jp/

  • 所在地: 〒104-0061 東京都中央区銀座一丁目27番8号 セントラルビル703号

  • 主な事業内容: AI技術の研究開発、コンサルティング、映像制作、AIソリューション販売、AIデジタルヒューマン販売

タイトルとURLをコピーしました