話題のAI画像生成で動画を変換してみました。<br>Stable Diffusion(AUTOMATIC1111)を魔改造してmovie2movie（動画→動画）変換してます。<br><br>不安定に見えますが、試行錯誤を経てだいぶ絵っぽく見えてきてます。ただ迫真空手部しか変換してみてないので、今後色々やってみようかと思います。<br><br><br><br>元動画の解像度が低いからか元とかけ離れた画像を生成しまくって、調整すっげぇキツかったゾ...。<br><br>▼実現方法<br>1. 動画→フレーム出力<br>2. フレームをSwinIRで4倍高解像度化<br>3. ポスタリゼーションをかけて境界をくっきりさせてみました（階調は10弱、ですかね...）<br>4. 画像を512px * 512px にリサイズ<br>5. img2img変換（余力があればここでもう一回高解像度化してみても良いかも。）<br>6. フレーム→動画出力<br>※プロンプトはシーン毎に少しずつ変えてみてます。<br><br>すべてpythonで自動化、Ryzen9 5900X ＆ RTX2060 で1000フレームあたり3時間ちょっとかかりました。<br><br>流行らせコラ！<br><br><br>あとこちらの動画が面白かったので是非。<br><a href="https://www.nicovideo.jp/watch/sm41227811" class="watch">sm41227811</a><br><br><br><span style="color: #ff0000; font-size: 16px;"><strong>追記）</strong></span><br>ご視聴ありがとナス！<br><br>近眼AI部作ってくださいました。→ <a href="https://www.nicovideo.jp/watch/sm41255383" class="watch">sm41255383</a><br>見える見える...。<br><br>すげぇ！　→　<a href="https://www.nicovideo.jp/watch/sm41253923" class="watch">sm41253923</a><br>モザイク君の顔がコロコロ変わるの好き。