写真を動かすAIとアプリ｜4つの種類と、1枚から作る手順

写真が動くアプリを選ぶ前に確かめること

写真が動くアプリやサービスは、種類が同じでも、できることと条件が違う。名前や評判で比べ始める前に、次の点を確かめる。

この記事で使うNoLangの「AIクリップ生成」は、写真1枚と文章の指示から数秒の映像を作る種類にあたる。動かすものと保つものを文章で書き、映像の長さと縦横の比率は生成する前に選ぶ。写真の一部だけが揺れる映像も、場面全体が動く映像も、同じ画面で作る。

NoLangはブラウザで使う。スマホのブラウザで開くと、入力欄と設定が画面の下にまとまって表示され、PCと同じ手順で作れる。

使える写真の形式、利用の条件、商用での利用は、記事の最後の「よくある質問」にまとめた。

写真1枚から短い映像を作る

では、実際には何をするのか。

NoLangでは、左のサイドバーにある「AIクリップ生成」を開く。画面の説明には「画像を動かしたり、人物を喋らせたりして、ワンシーンの短い動画を作れます」と書かれている。ここで使うのは、画像を動かすほうである。

操作は5つである。

写真を添付して動かし方を書くと、画面はこうなる。

右側のパネルが、生成前に確かめるところである。比率には「おまかせ」があり、これを選ぶと添付した写真に合わせて決まる。手元の写真の構図をそのまま使いたいなら、ここは触らなくてよい。映像の長さと大きさも、この画面で選んでから生成する。

どの写真を選ぶか

どんな写真でもいいのか。

そうであってほしい、とは思う。ただ、出来上がった映像の良し悪しは、指示よりも先に、入れた写真の時点で決まっている部分が大きい。AIは写真の続きを作るので、続きを想像する手がかりが写真の中に無ければ、そこは作りようがない。

見るところは3つある。

この記事の作例には、次の画像を使った。木のテーブルに置かれた1つのカップ、窓からの光、立ちのぼる湯気。動かしたいのは湯気で、周りに余白を残して画面に収まっている。カップの白さも木目も、細部まで見て取れる。

人物の写真で見るところは、人物や昔の写真を、話さずに動かすでまとめる。

動きの指示に何を書くか

最初は「コーヒーがいい感じに動く」とだけ書けば済むと思っていた。実際にはそれでは、何が動くのかがAIに伝わらない。

指示に書くのは4つである。

「保つもの」を書くことには、動かす指示と同じくらい効果がある。指示されていない部分はAIが推測で補うため、名指ししなかったものは変わってもよいと解釈される余地が残る。

この4つのうち、「動き」と「カメラ」を書き換えると、同じ写真から違う映像が出てくる。上の画像1枚に、2つの指示を与えてみた。

被写体が動く

入力画像を最初のフレームに使う。
カップの形、コーヒーの色、木のテーブルの木目、
窓からの光と構図を保つ。
カメラは固定したまま、
コーヒーから立ちのぼる湯気だけが、
ゆっくりと揺れて上がる。

カップもテーブルも窓も、置かれた位置のまま動かない。変わるのは湯気の形だけで、立ちのぼりながら左右に揺れる。止まった一枚だったはずの場面に、5秒ぶんの時間が流れている。

写真の一部だけを動かしたいときは、この書き方になる。カメラを固定し、動かす部分を主体に書き、それ以外を保つものに並べる。

カメラが動く

入力画像を最初のフレームに使う。
カップの位置、コーヒーの色、木のテーブルの木目、
窓からの光を保つ。
カメラがカップへゆっくりと寄る。
カップ自体は動かさず、寄る動きだけで見せる。

こちらはカップが画面の中で大きくなっていく。窓枠は画面の端へ追いやられ、テーブルの木目も寄るにつれて粗く見える。カップ自体は動いていないのに、見ている側が近づいていく映像になる。

同じ写真である。動きとカメラの書き方を変えると、出来上がった映像の性格はここまで変わる。商品を見せたいなら後者、その場の空気を伝えたいなら前者、という選び方になる。

2つの指示を見比べると、「保つもの」も少し違う。カメラを固定した1本目は構図まで保つと書いているが、カメラが寄る2本目では構図を外してある。寄る動きそのものが構図を変えるので、両方を求めると指示が食い違う。「保つもの」は、頼んだ動きと両立するものだけを並べる。

マーベリック君

何をどう動かしたいかが自分の中で言葉になっていれば、そのまま書けばいいんだね

写真の種類別のコツ

人物、昔の写真、イラスト、ペットを動かすときも、指示に書くのは同じ4つである。種類によって書き分けるのは、「主体」「動き」「保つもの」に書く中身である。

人物と昔の白黒写真は、人物や昔の写真を、話さずに動かすで、実際に生成した映像とあわせて説明する。

出てきた映像を確かめる

生成できた。これで終わりか。

作った映像をそのまま使う前に、3つ見る。順番がある。

1. 動かしたいものが動いたか。 指示した主体が、指示したとおりに動いているか。湯気を動かしたかったのに、湯気が止まったままカメラだけが揺れているなら、主体の書き方を直す。
2. 保ってほしいものが保たれているか。 名指ししたものを1つずつ確かめる。今回ならカップの形、コーヒーの色、木目、窓からの光、そして1本目なら構図。
3. 入れていないものが入っていないか。 指示していない人や物、文字が現れていないか。

上の2本では、湯気とカメラはそれぞれ指示どおりに動き、名指ししたカップの形も色も木目も崩れていなかった。1本目は映像全体が入力画像とほぼそのまま重なり、カメラを固定した指示が効いている。構図を厳密に保ちたいときは、出来上がった映像と入力画像を見比べるのが早い。

直すときは、さきほどの4つのどれを書き換えるかで考える。動かしたいものが動かなければ主体を、動きすぎるなら動きを、画面の寄り引きが違うならカメラを書き換え、崩れた部分があれば「保つもの」にその部分の名前を足す。

人物や昔の写真を、話さずに動かす

人物の写真も、昔の白黒写真も、ここまでと同じ手順で動かせる。話す内容は決めなくてよい。微笑む、顔の向きを変えるといった小さな動きを、指示に書く。亡くなった家族の写真を動かすときも、作り方は同じである。使う前に確かめることは、この節の最後にまとめた。写真の人物に話させたい場合は作り方が別になり、AIアバターとは？3種類の違いと活用場面、話す動画の作り方で扱っている。

ここでは、画像生成で作った架空の人物の画像を2枚使った。パン屋の店内に立つ女性のカラーの画像と、昔のスタジオ写真のような白黒の画像である。

人物の写真で見るところ

見るところはどの写真を選ぶかの3点と同じで、人物では次のように読み替える。

昔のプリント写真は、反射や影が入らないように取り込んでから使う。写真が小さく顔の細部が分かりにくいと、動いたときの顔をAIが補う部分が増える。

2枚とも、写っているのは1人で、顔が大きく、目と口元がはっきり見える。

動きは小さく、保つものに顔立ちを書く

指示に書く4つは、動きの指示に何を書くかと変わらない。人物では、動きと保つものの書き方に気を配る。

唇を閉じたまま微笑む

入力画像を最初のフレームに使う。
女性の顔立ち、髪型、エプロンと服、
背景、構図を保つ。
カメラは固定したまま、
女性が唇を閉じたまま、歯を見せずに、
口角を少し上げてほほえむ。

女性の口角がゆっくり上がり、目元もやわらぐ。唇は最後まで閉じたままで、歯は見えない。髪型、エプロン、背景のパン棚は、形も色も元の画像のままである。

「唇を閉じたまま、歯を見せずに」と書いたのは、口が開くと、写真に写っていない歯をAIが作ることになるからである。

白黒写真の顔をこちらへ向ける

入力画像を最初のフレームに使う。
白黒のまま、男性の顔立ち、髪型、
スーツ、背景、構図を保つ。
カメラは固定したまま、
男性がゆっくりと顔を少しこちらへ向ける。

左を向いていた男性が、肩と一緒にゆっくりとこちらへ向き直る。最後まで白黒のままで、髪型、スーツ、背景の灰色も元の画像のままである。

人物の出来上がりで確かめること

出てきた映像を確かめるの3点に、人物では次の3つを足す。

1. 同じ人に見えるか。 最初の場面と最後の場面で止めて、入力の写真と見比べる。微笑んだり向きを変えたりしたあとの顔が、別人になっていないかを見る。
2. AIが作った部分の形は自然か。 口が開いて見えた歯、写っていなかった手や指、向きを変えて見えた顔の反対側など、写真に無かった部分を確かめる。
3. 人物の周りが保たれているか。 髪型、服、背景の文字。白黒の写真なら、色が付いていないか。

上の2本では、女性の最後の場面は入力と同じ人の笑顔に見え、唇は閉じたままだった。男性の最後の場面は、入力では見えていなかった側の顔をAIが補った姿だった。髪の形、眉、耳の形は入力のままで、同じ人に見えた。

直し方は、出てきた映像を確かめると同じく4つのどれを書き換えるかで考える。人物では、動きを小さくすることと、顔がより大きく写った写真に替えることも試せる。

他人や亡くなった人の写真を使う前に

家族や友人、亡くなった人の写真を動かすときは、作る前に次を確かめる。

NoLangの注意事項は、記事の最後の「よくある質問」にまとめた。

作った数秒の映像を使う

数秒の映像ができた。これを何に使うのか。

使い道は2つある。

1つは、そのまま単独で使うことである。この記事の作例はどれも5秒で、SNSの投稿や、商品ページに置く短い動画としてはこのまま使える。

もう1つは、長い動画の1場面として使うことである。出来上がった映像を開くと、「動画で使う」というボタンがある。

これを押すと動画の制作画面へ移り、作ったクリップが動画素材として添付される。そこから、商品紹介の冒頭に置く場面や、説明の合間に差し込む場面として、動画の制作へ進める。

写真や画像から動画を作る機能そのものは、写真から動画を作るAIで確認できる。

会社で使うとき

会社やお店の商品写真を動かした短い映像を、商品紹介や案内の動画に使い続けるなら、NoLangで動画まで作る方法もある。AIクリップ生成で作った映像は「動画で使う」から動画の制作画面へ移し、文章や資料から作る動画の1場面にできる。会社での使い方はお問い合わせから相談でき、詳しい資料は下のボタンから請求できる。