あけおめ動画を色々なAI動画生成で作ってみた

最近色々と忙しくて更新をサボっていましたが、久々の更新が「あけおめ」ですみません。
生成サービスで違いがあるので、その辺も含めてお楽しみください。

まずプロンプトですが、

全体的に日本のアニメ調にしてください。
日本の正月の挨拶用動画を作成してください。
画面上部に日本語で「あけましておめでとう」と毛筆で書いているように表示してください
画面下部にデフォルメしたリスを表示して正面へ向かって手を振ってください
画面左右に門松を配置してください
画面の左下に「AIS」と表記してください
正月の背景は日本っぽい風景にしてください

といったプロンプトで作成していきます。

日本語の文字生成はsoraしか再現できないので、

画面上部に日本語で「あけましておめでとう」と毛筆で書いているように表示してください

このプロンプトを削除して、文字以外で生成します。
必要なら後から動画編集ソフトで、文字を入れればいいかなと思います。

それでは、各動画生成AIで作成した動画を見ていきます。

最初はwan2.2で作成
ローカルで作成できるため、制限が無いので、数を作成しています。
一挙に３本

全般的に微妙にリスが可愛くないのと、雪がなぜか降っています。演出的には綺麗ですけどね・・・。
最初の動画は建物はそれっぽいですが、背景の壺みたいなのが、あまり日本で見ない形状なので、少し不自然です。
２つ目の動画は、背景の提灯がどこだ？って感じですが、畳は長方形で問題無さそうです。
３つ目の動画は、なぜかプロンプトで指示していない女の子が二人描かれていたり、リスを「Squirrel」と英語で書いてあって、それも指示していない内容ですが、ちょっと面白い感じになりました。

次はOpenAIの「Sora」です

かなり動画の表現力が高い事で有名なので、今回の本命ですね
音も同時に付けてくれるので、凄いですよね。いい感じにできあがっています

何本か生成したので、失敗はこちら

リスが可愛くないのと、音楽が日本っぽく無いとか、文字が残念ですが、背景は日本ぽさが出ているので、頑張ろうとした形跡はありますｗ

次はGoogleの「VEO」です

これも音も自動で付けてくれる優れものです。
しかしながら、GoogleのAI有料プランPROだと、１日３本程度で制限に引っかかります。
お試しならいいですが、常用するにはプランを上げないと厳しいですよね。
では、「VEO」で作成した動画です（バージョンはVeo3.1）

「あけましておめでとう」の文字が残念な感じになっています。
しかし、それ以外はかなりできがいいです。
特に背景や正月っぽい豪華さを出している所が、よくできていると思いました。
そこで、日本語抜きで作成すれば、いい感じになりそうなので、「あけましておめでとう」を消してみようと思いましたが、うまく行きませんでした。
その結果がこちら

なぜかよく分からないテキストが右上に入り込んでいます。
AISも２重に入って、謎な状況になっていますが、それ以外は凄くいい感じになっています。
音の方もできが良く、「あけましておめでとうございます」って声が入っていて、楽器も和楽器な感じで出来が良いです。
背景も鶴が飛んでいたり富士山もいい感じで描かれていて、かなり惜しいです。

他の失敗も含めて３本作成すると上限になったので、次の日になってから、やり直した結果がこちらです。

結構いい感じになっています。
音声で「あけましておでとうございます」も入っていて、リスもいい感じで可愛いし、変な文字も入っていません。
個人的には一番、出来がいいかもと思ってます。

別のローカル動画生成AIで、他にも試してみます。

日本語での指示には問題がありそうなので、英語に翻訳してからプロンプトを投げます

Please give the entire video a Japanese anime style.
Please create a video for New Year's greetings in Japan.
Display a stylised squirrel at the bottom of the screen, facing forward and waving its hand.
Place kadomatsu decorations on the left and right sides of the screen.
Display "AIS" in the bottom left corner of the screen.
Please use a Japanese-style landscape for the New Year's background.

「Hunyuan Video 1.5」を使用して、テキストから動画を生成します。

アニメっぽさはいい感じですが、リスは微妙な感じだったり、リスの胸に「AIS」が書かれているなど、なんか想像していた方向性とかなり違いますｗ

「Kandinsky 5.0 Video Lite」を使用してテキストから動画を生成

これは、ロシア発のオープンソース動画生成のAIです。
結果を見れば一目瞭然ですが、日本を描くのは得意ではない事がよく分かります。
学習データの問題なんだと思います。

色々残念な上に、額縁みたいな物があるのも謎です。

せっかくなので、得意そうな映像を「Kandinsky 5.0 Video Lite」で作成してみます。

スポーツカーが、サーキットを凄い速度で走っています。
コースのカーブを綺麗に駆け抜けます。
カメラは車の後方、ドローンからの視点で迫力のある映像です

The sports car races around the circuit at incredible speed.
It takes the course's bends beautifully.
The camera captures the action from behind the car, offering dramatic footage from a drone's perspective.

上部の日本語を下部の英語に翻訳して、生成してみました。
自動車やサーキットなどのリアルな映像を生成した方が完成度は高そうです。

スローな映像ですが、比較的いい感じになってます
最後に、それでも微妙なパターン

なぜかサーキットで対向車がｗ
動画を延長したらどうなるのか・・・ちょっと気になります。

ってな訳で、以上です