こんばんは。
今回は、今現在、個人的に研究と調査、試用しているAI技術に関する話を書いていこうと思います。
稀に書いている内容で、ゲーム以外の趣味として公言してもいいレベルになってきたものが、「AI技術」を使ってイラストなどを制作していくこと。
それ以外にも、色々なAIに関する情報を調べていて、私が唯一強く興味がある分野と言ってもいいくらいのもの。
フレンドとゲームで遊んで解散した後の深夜から朝方までは、ストリクトなどのプログラムなどを調べては小説を書くと言うのが日常化していますｗ
その一端について書くと、
テキストに関する話は、やり過ぎたら自分のブログが実はAIがゴーストライターやってるとか言われそうなので放置。
イラストに関する話はかなりの進展があり、、、
こちらの記事で、今までのAIイラストの製法に複数の分野に特化しているものを使っていく手法を総称して第3世代と言いました。
工程としては、イラストを出力するAI→イラストにアレンジや補正を加えて独創性を持たせるAI→画像を4K&修正を行うAIです。
これに、追加で第4のAI、もしくは手動で画像を修正していくと言う構想が形として出来てきました。
昔のサンプルがあまりなかったので適当にPSO2の自キャラ、セシリアちゃんの画像を作りました。
第1、第2は色がべた塗りですが、第3世代のイラストはAIの進化とストリクトの効果が凄まじすぎて、パッと見ではもう人間かAIの識別が付かないほど。
サムネにもなっているこのセシリアちゃんのイラストを未だに超えた絵は作れていません。
そして、第4の工程では既に塗られているイラストのカラーコードを識別して編集させるか手動で色塗りさせる技術の試運転に入っている段階です。
サンプルとして作ったものはこんな感じ。
このセシリアちゃんは極端に色を弄っていますが、
(目の色が同期して同じだし緑と灰色なっていないのがダメなところ)
この2人のキャラである結花と麻梨のイラストはもう十分と言ってもいいレベルの絵になってきたかと。
欠点としては、バカみたいに画素数を上げているので、jpeg 4kで約10mp以上と言うとんでも画質になってますｗ
ブログ用に画質を下げてしまっているものの、第4世代イラストとして言ってもいいかもしれません。
しかし、これらをテンプレート化して量産させる事が目標なので、ここまで到達して初めて第4世代ですね。
残念ながら、ここまで作るのに1枚で約30分もかかります、、、
これでLive 2D化して動いたりしたらもう最強ですねｗ
(実はもう動かすための構想を調べている段階です)
そして、最後は映像技術に関する事です。
イラストにも転用するか不明ですが、AIで今まで保管していた古い映像を解析して1080pや4kさせるリマスター化と、30→60fpsとしてフレームレートを補間させてエンコード化させると言う技術も研究中。
こちらもテンプレート化するまでは研究中と言う事で公開できる内容ではないものの、その事を知ってから2日ほどでもう既に形として運用可能なレベルにまで到達しています。
このスクショだけでは伝わりませんが、実際にリマスター化させた映像は違和感がないレベルのものまで動かせています。
左：PS4 通常版でキャプチャーした 1280x720 720p
右：AIでリマスター化 2560x1440 1440p
これの使い道は、今まで作った動画を現代の水準まで引き上げて、PS4とPS5で作った動画を修正させる事が目的です。
過去にあげたこの動画などが例として挙げれますが、フレームレートがガタガタで見辛いと言う問題がありました。
最近ゲームよりも研究している時間の方が長くなってきていますが、今後の進展に期待できるような内容や成果を出していきたいです。
