撮れなかった記憶をAIで再現する時代へ
朝の出汁版(通勤2分)
- ポイント1: Google DeepMindが、撮影されていない過去の瞬間をアーカイブ写真とポーズ制御モデルで映像化するドキュメンタリー「Love, Rendered」を発表し、生成AIがコンテンツ制作の「空白を埋める」フェーズに入りつつある。
- ポイント2: 使う側として知っておくべきは、静止画×ポーズ制御という組み合わせが「動いていない素材から動画を作る」実用ルートとして機能し始めていること。自分で撮っていない素材でも映像コンテンツが成立する可能性が広がっている。
- ポイント3: 始めるなら、手元にある古い写真や低品質な素材をRunwayやPikaなどのポーズ・モーション制御機能に通してみるところから試せる。
出汁の素(深読みモード)
撮影されていない記憶を、AIが「再現」する
Google DeepMindが公開したドキュメンタリー「Love, Rendered」が、コンテンツ制作の世界で静かに注目されている。この作品が扱っているのは、カメラが存在しなかった時代の記憶だ。主人公であるBurtとEthelleが初めて出会った日——そこには当然、映像記録がない。DeepMindのチームはその「空白」を、当時のアーカイブ写真と、ポーズ制御モデルの組み合わせで埋めた。静止画から人物の姿勢・動き・表情のクセを読み取り、映像として再構成するというアプローチだ。発表内容を読むと、単なるフォトスライドショーとは次元が異なる。マイクロエクスプレッション(微表情)や仕草といった、その人固有のふるまいを再現することに注力したとある。技術的には「ポーズ制御モデル」と呼ばれる手法が中心で、画像内の骨格・関節情報をもとに動きを生成する仕組みだ。Runway、Pika、AnimateAnyoneなどのツールが採用しているものと同系統の技術が、ここまでの表現に使われている。
生成AIのコンテンツ制作活用は、「テキストから画像」「テキストから動画」という段階を経て、「静止画から動画」「記録のない過去から映像」というフェーズへ入りつつある。AI画像×動画生成、実践者たちの最前線でも触れたように、静止画を動画に変換するアプローチはすでに実践者の間で広がっているが、DeepMindの今回の事例はそれを「感情的・物語的文脈」に持ち込んだという点で一線を画す。
「自分で撮っていない素材」が使えるという意味
使う側として今回の発表から読み取るべき本質は、「撮影していない素材でもコンテンツが成立する」という実用的な転換点だ。
これまで動画コンテンツを作るには、動画を撮ることが前提だった。スマホで撮影する、カメラを借りる、あるいはストック映像を購入する——いずれにせよ「動いている素材」が起点だった。今回の手法は、その前提を崩す。手元にある古い写真、解像度の低い過去の記録、ネットに公開されているアーカイブ画像——そういった「静止した素材」を映像コンテンツへと変換するルートが、実用レベルに近づいている。
たとえば、こんな使い方が考えられる。創業者やブランドの歴史を振り返るコンテンツで、昔の写真しか残っていないケース。インタビュー素材が写真だけのケース。家族の歴史を映像にまとめたいが動画がないケース。ポーズ制御を使えば、人物の動きや表情を「それらしく」補完できる可能性がある。もちろん現時点では再現精度や倫理的な取り扱い(本人や遺族の同意、フィクション表示など)への配慮が必要なことは言うまでもないが、技術の方向性として知っておく価値は大きい。
生成AI画像、クリエイター現場にじわり浸透でも指摘されているように、AIによる素材生成はすでに「プロのクリエイターが使うもの」から「一人で動くジェネラリストが使うもの」に移行中だ。今回の技術もその延長線上にある。
手元の写真でまず試す:ポーズ制御ツールへの入口
実際に触り始めるなら、すでに一般公開されているツールから入るのが現実的だ。以下に、ポーズ制御・モーション生成の文脈で手が届く選択肢を整理する。
Runway(Gen-3 Alpha / Act-One) runway.ml からアクセス可能。Act-Oneは顔の動き・表情を動画に転写する機能で、静止画に「表情の動き」を与えるのに使える。月額プランあり、無料枠での試し打ちも可能。
Pika(pika.art) 静止画から短尺動画を生成する機能に加え、動きの指定やキャラクターの一貫性を保つ機能が強化されている。直感的なUIで入りやすい。
Kling AI(klingai.com) 画像から動画生成において、人物の動きの自然さで評価が高い。日本語UIでも使いやすいレベルになっている。
始め方としては、手元にある人物が写った写真(できれば顔・上半身が明確なもの)をこれらのツールに入力し、モーション生成や表情変換を試してみるところからスタートできる。「どの素材が使いやすいか」「どのツールの出力が自分の用途に近いか」は触ってみないとわからない部分が大きいので、一枚の写真で複数ツールを横断比較するのが効率的な進め方だ。
ポーズ制御モデルを自前で動かしたい人へ
より深く踏み込むなら、ControlNetやAnimateAnyoneといったオープンソースの実装を自前で動かす選択肢がある。ComfyUIやAUTOMATIC1111といったローカル環境に慣れているなら、GitHub上に公開されているポーズ制御系のワークフローを導入することで、商用ツールに依存しない形でポーズ・モーション制御を試せる。
Hugging FaceではAnimateAnyoneをはじめとする複数のモーション生成モデルが公開されており、デモスペースで入力画像を渡すだけでも動作確認ができる(huggingface.co で「AnimateAnyone」「ControlNet Pose」などのキーワードで検索)。GPUリソースがあればColabでの実行も可能だ。DeepMindが今回使ったのはこれらと同系統の技術をより高度に組み合わせたものだが、原理の確認と初歩的な実験はオープンソースで十分できる。
元になったツイート
おはようございます。 お仕事の方も お勉強の方も お休みの方も 飲み物を飲んで まったりと過ごしませんか? #フォロバ100 #相互フォロー募集中 #生成AI画像 https://t.co/tudD6s9t8E
おはようございます。 今日も頑張ってね。 頑張っている人を応援します。 これを見た人はみんないい日になりますように。 動物/運気アップ 生成AI画像です https://t.co/Ia3xsbbTEB
How can we reconstruct a memory that was never filmed? Our team paired restored archival photos with pose control models to capture the mannerisms and micro-expressions of Burt and Ethelle. This helped bring the day they first met to life for Love, Rendered, a new documentary h
参照ソース
- [X]@id_1612030424964030467: おはようございます。 お仕事の方も お勉強の方も お休みの方も 飲み物を飲んで まったりと過ごしま…→ twitter.com/id_1612030424964030467/status/2098…
- [X]@id_1018230400240381952: おはようございます。 今日も頑張ってね。 頑張っている人を応援します。 これを見た人はみんないい…→ twitter.com/id_1018230400240381952/status/2098…
- [X]@GoogleDeepMind: How can we reconstruct a memory that was never fil…→ twitter.com/GoogleDeepMind/status/209841796664…
