米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。
画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を捉えきれず、画質も不十分だ。
この手法では、1枚の参照画像から近似するペア画像データを先に生成し、それを学習に使用する方法でこの問題に取り組む。具体的には、1枚の参照スタイル画像をGANで反転して実写に対する潜在変数を取得し、Random Style Mixingを行うことで近似のペア画像データセットを作成する。
得られた近似のペア画像データセットには、さまざまな色特性を持つサブセットも含まれる。ペア画像データセットを生成した後は、事前に学習させたStyleGANを微調整する
変換した顔画像を評価するために、先行研究の類似手法(StyleGAN -NADA、BlendGAN)で出力した画像と比べた結果、他の類似手法よりもこの手法の方が、入力画像の顔のアイデンティティーを保持したまま、目の形や線の太さなどの詳細な特徴を捉えた画像を生成できると分かった。
Webブラウザ上で任意の顔画像をジョジョ風などに変換できるデモサイトも公開されている。試してみると、以下のような結果が出力された。
https://www.itmedia.co.jp/news/articles/2201/06/news037.html
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_2_w490.png
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_3_w490.jpg
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_4_w490.jpg
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_5_w490.jpg
クオリティが低いジョ
アメリカ風味が入ってる
でもこれ表情を似せてるだけで写真の顔立ちには似てないよな
仕上がり微妙だな。有料なら金返せとか言われるレベル
アメコミ入ってるぞ
進撃風だが
>>13
思ったw
なんか目がギラギラしとるな
思ったよりつまらなかった
もうちょっと、こう…
あの人今でも手書きやからAIで設定されるのはコレジャナイ感が
顔のパーツを認識して、絵をベースに角度やサイズを調整してるだけだなこれ
こんなの俺でもプログラミングできない
目がワンパターンじゃあないか
全然ジョジョじゃない件
漫☆画太郎風になるやつが欲しい
モデルになってるのが美男美女で顔立ち整ってるやつばっかりやん
もっと癖のあるやつをサンプルにしろよ
ポーズは?
全身写真でジョジョポーズになるんならバズるやも知れぬ
高橋陽一のキャラクター風なんかもやってほしい(全員同じ顔)
YouTubeで見たジョジョ風アイキャッチ作ってみたってシリーズみたいな感じかと思ったら違うんだね
はぁ?全然JOJOでない
なんでアニメの絵でやるかな
荒木の絵でやれよ
センスゼロかよ
>>63
これかと思ってwkwkして開いたのに(´・ω・`)
北条司の方が似せやすそうだな
原型とどめてないのはいいのか
多分背景に「バァァァーン」とか文字が出る方がジョジョっぽくなると思う
全部男になってんじゃん
目元がそれっぽくなるだけでコレジャナイ感
なんか違う
これすごいじゃん
顔を漫画イラスト風に加工できるアプリはいっぱいあるけどここまで完成度高くないのがほとんど
これ売れるんじゃね