1:名無しさん


米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。

画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を捉えきれず、画質も不十分だ。

この手法では、1枚の参照画像から近似するペア画像データを先に生成し、それを学習に使用する方法でこの問題に取り組む。具体的には、1枚の参照スタイル画像をGANで反転して実写に対する潜在変数を取得し、Random Style Mixingを行うことで近似のペア画像データセットを作成する。

得られた近似のペア画像データセットには、さまざまな色特性を持つサブセットも含まれる。ペア画像データセットを生成した後は、事前に学習させたStyleGANを微調整する

変換した顔画像を評価するために、先行研究の類似手法(StyleGAN -NADA、BlendGAN)で出力した画像と比べた結果、他の類似手法よりもこの手法の方が、入力画像の顔のアイデンティティーを保持したまま、目の形や線の太さなどの詳細な特徴を捉えた画像を生成できると分かった。

Webブラウザ上で任意の顔画像をジョジョ風などに変換できるデモサイトも公開されている。試してみると、以下のような結果が出力された。

https://www.itmedia.co.jp/news/articles/2201/06/news037.html



https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_2_w490.png
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_3_w490.jpg
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_4_w490.jpg
https://image.itmedia.co.jp/news/articles/2201/06/l_tm1636144_jojo_5_w490.jpg

 

4:名無しさん


クオリティが低いジョ

 

5:名無しさん


アメリカ風味が入ってる

 

6:名無しさん


でもこれ表情を似せてるだけで写真の顔立ちには似てないよな

 

8:名無しさん


仕上がり微妙だな。有料なら金返せとか言われるレベル

 

12:名無しさん


アメコミ入ってるぞ

 

13:名無しさん


進撃風だが

 

24:名無しさん

>>13
思ったw


18:名無しさん


なんか目がギラギラしとるな

 

20:名無しさん


思ったよりつまらなかった
もうちょっと、こう…

 

21:名無しさん


あの人今でも手書きやからAIで設定されるのはコレジャナイ感が

 

22:名無しさん


顔のパーツを認識して、絵をベースに角度やサイズを調整してるだけだなこれ
こんなの俺でもプログラミングできない

 

25:名無しさん


目がワンパターンじゃあないか

 

30:名無しさん


全然ジョジョじゃない件

 

36:名無しさん


漫☆画太郎風になるやつが欲しい

 

37:名無しさん


モデルになってるのが美男美女で顔立ち整ってるやつばっかりやん
もっと癖のあるやつをサンプルにしろよ

 

42:名無しさん


ポーズは?

 

48:名無しさん


全身写真でジョジョポーズになるんならバズるやも知れぬ

 

52:名無しさん


高橋陽一のキャラクター風なんかもやってほしい(全員同じ顔)

 

53:名無しさん


YouTubeで見たジョジョ風アイキャッチ作ってみたってシリーズみたいな感じかと思ったら違うんだね

 

61:名無しさん


はぁ?全然JOJOでない

 

63:名無しさん


なんでアニメの絵でやるかな
荒木の絵でやれよ
センスゼロかよ

 

77:名無しさん

>>63
これかと思ってwkwkして開いたのに(´・ω・`)


64:名無しさん


北条司の方が似せやすそうだな

 

70:名無しさん


原型とどめてないのはいいのか

 

79:名無しさん


多分背景に「バァァァーン」とか文字が出る方がジョジョっぽくなると思う

 

86:名無しさん


全部男になってんじゃん

 

81:名無しさん


目元がそれっぽくなるだけでコレジャナイ感

 

84:名無しさん


なんか違う

 

69:名無しさん


これすごいじゃん
顔を漫画イラスト風に加工できるアプリはいっぱいあるけどここまで完成度高くないのがほとんど
これ売れるんじゃね