ジョジョのキャラクター風に顔写真を変換する「JoJoGAN」 1枚の画像からAIが学習 [156193805]

ジョジョのキャラクター風に顔写真を変換する「JoJoGAN」 1枚の画像からAIが学習  [156193805]

1 ::2022/01/06(木) 18:50:45.34 ID:6ehE2mvL0●.net ?PLT(16500)

米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。

画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を捉えきれず、画質も不十分だ。

この手法では、1枚の参照画像から近似するペア画像データを先に生成し、それを学習に使用する方法でこの問題に取り組む。具体的には、1枚の参照スタイル画像をGANで反転して実写に対する潜在変数を取得し、Random Style Mixingを行うことで近似のペア画像データセットを作成する。

得られた近似のペア画像データセットには、さまざまな色特性を持つサブセットも含まれる。ペア画像データセットを生成した後は、事前に学習させたStyleGANを微調整する

変換した顔画像を評価するために、先行研究の類似手法(StyleGAN -NADA、BlendGAN)で出力した画像と比べた結果、他の類似手法よりもこの手法の方が、入力画像の顔のアイデンティティーを保持したまま、目の形や線の太さなどの詳細な特徴を捉えた画像を生成できると分かった。

Webブラウザ上で任意の顔画像をジョジョ風などに変換できるデモサイトも公開されている。試してみると、以下のような結果が出力された。

https://www.itmedia.co.jp/news/articles/2201/06/news037.html




70 ::2022/01/06(木) 21:28:15.72 ID:VQ6k0JJl0.net

>>67
グロ

37 :名無しさんがお送りします:2022/01/06(木) 19:39:13.11 ID:3tn6HZ/EG

無駄ぁぁぁああああああああ!!!!!!!!!!!!!!!

やれやれだぜ

60 ::2022/01/06(木) 20:48:37.18 ID:uB7tPwDn0.net

いやジョジョ風に出来てないじゃん

57 ::2022/01/06(木) 20:21:36.09 ID:EsSVuV/30.net

安倍はよ

14 ::2022/01/06(木) 18:59:12.76 ID:rE/psywM0.net

ギョギョッ!

76 ::2022/01/07(金) 00:31:49.05 ID:zh397tWy0.net

>>75
でもお前彼の言いたい事理解してない馬鹿じゃん

21 ::2022/01/06(木) 19:03:58.93 ID:LcLFwsrA0.net

あの人今でも手書きやからAIで設定されるのはコレジャナイ感が

2 ::2022/01/06(木) 18:52:31.94 ID:ycxf26yw0.net

何でもかんでもAIAI言う今の社会に違和感
ただのマスデータとアルゴリズム処理だろ

41 ::2022/01/06(木) 19:52:27.18 ID:iAJZimY50.net

言うほど似てない

64 ::2022/01/06(木) 20:54:04.73 ID:tPxxzSPI0.net

>>2
コミュ障エンジニアは知識ない人相手でも専門用語使うもんな

47 ::2022/01/06(木) 19:59:57.85 ID:hIAme1pN0.net

どっちかと言うと池上遼一風の方が近いと思う

65 ::2022/01/06(木) 20:54:09.23 ID:UU380OL10.net

なんでアニメの絵でやるかな
荒木の絵でやれよ
センスゼロかよ

72 ::2022/01/06(木) 21:54:48.88 ID:zo/mcKLO0.net

原型とどめてないのはいいのか

68 ::2022/01/06(木) 20:58:33.03 ID:zVYiNBWg0.net

進撃だろ
JOJOではない

86 ::2022/01/07(金) 02:12:30.33 ID:kPyhSjKH0.net

なんか違う

51 ::2022/01/06(木) 20:03:59.79 ID:uWcEtuqr0.net

こういうの期待したのに

43 ::2022/01/06(木) 19:55:28.64 ID:L9IqMDSk0.net

たいして出来がよくない

36 :名無しさんがお送りします:2022/01/06(木) 19:34:11.94 ID:YA1ZduzDq

髪と骨格以外ほぼ同一じゃねえか

16 ::2022/01/06(木) 19:00:57.79 ID:MB7EjCqG0.net

カイジ風も頼む

63 ::2022/01/06(木) 20:52:53.46 ID:yNjARzca0.net

はぁ?全然JOJOでない

87 ::2022/01/07(金) 02:20:13.60 ID:D6p0ekP60.net

池上絵の劇画じゃんか

58 ::2022/01/06(木) 20:22:15.85 ID:KKUMuNYA0.net

ヘブンズドアーで顔の形変えられたらなぁ、やっぱり記憶だけ?

91 ::2022/01/07(金) 08:32:58.33 ID:GgoAZ5ri0.net

ドドドドドドドドドドドドドが足りない

69 ::2022/01/06(木) 20:58:46.32 ID:zVYiNBWg0.net

>>67
やめろ

22 ::2022/01/06(木) 19:05:19.85 ID:lrhBiXn90.net

顔のパーツを認識して、絵をベースに角度やサイズを調整してるだけだなこれ
こんなの俺でもプログラミングできない

13 ::2022/01/06(木) 18:58:46.90 ID:OjbJQSmc0.net

進撃風だが

44 ::2022/01/06(木) 19:55:31.37 ID:SWDEVTlL0.net

ポーズは?

34 ::2022/01/06(木) 19:26:29.89 ID:UAig/RHT0.net

ジョジョではないな

4 ::2022/01/06(木) 18:54:12.33 ID:wHAXh0XQ0.net

クオリティが低いジョ

66 ::2022/01/06(木) 20:55:40.84 ID:lvRuNN+K0.net

北条司の方が似せやすそうだな

73 ::2022/01/06(木) 21:55:26.14 ID:KNafXwiG0.net


75 ::2022/01/06(木) 22:05:05.39 ID:+909+P4z0.net

>>64
君がバカだから理解できないだけじゃん

3 ::2022/01/06(木) 18:53:41.65 ID:HovNJ27a0.net

岡くんはアレッシーかな

45 ::2022/01/06(木) 19:56:06.95 ID:Tn+TWXz90.net

カイジ風になったら起こして

26 ::2022/01/06(木) 19:10:46.64 ID:34qGEQYU0.net

でも黒人は認識できないんでしょ?

48 ::2022/01/06(木) 20:00:33.57 ID:f/MW00uW0.net

メメタア

32 ::2022/01/06(木) 19:23:23.48 ID:nDWKVmdn0.net

>>1
外側だけで中身を考慮してなくて草
やっぱヲタが作っただけある

54 ::2022/01/06(木) 20:14:40.51 ID:4edv9wfq0.net

高橋陽一のキャラクター風なんかもやってほしい(全員同じ顔)

20 ::2022/01/06(木) 19:03:47.23 ID:khiuYLCb0.net

思ったよりつまらなかった
もうちょっと、こう…

96 ::2022/01/08(土) 05:43:45.51 ID:CeY3a47n0.net

そーでもなくて草

62 ::2022/01/06(木) 20:51:42.52 ID:JI3ctrMj0.net

思ったよりクオリティが低くてコレジャナイ感が凄い

52 ::2022/01/06(木) 20:08:52.52 ID:v7Tv083J0.net

おまえらはしげちーな

50 ::2022/01/06(木) 20:01:37.45 ID:PMGtIrJc0.net

全身写真でジョジョポーズになるんならバズるやも知れぬ

56 ::2022/01/06(木) 20:19:46.93 ID:C5BsTlye0.net

>>2
文系の奴ほどそうだよね
シンギュラリティとかwww

81 ::2022/01/07(金) 01:04:11.41 ID:D231zH2f0.net

多分背景に「バァァァーン」とか文字が出る方がジョジョっぽくなると思う

18 ::2022/01/06(木) 19:01:31.90 ID:gstdNTov0.net

なんか目がギラギラしとるな

19 ::2022/01/06(木) 19:02:44.53 ID:kBxf2mlC0.net

面白い

7 ::2022/01/06(木) 18:56:36.07 ID:k/iqibC50.net

それよりこれどうなったんだよ…
https://gigazine.net/news/20210529-haguyatsu/

38 ::2022/01/06(木) 19:36:24.21 ID:A+OKK5KI0.net

漫☆画太郎風になるやつが欲しい

6 ::2022/01/06(木) 18:55:23.97 ID:34qGEQYU0.net

でもこれ表情を似せてるだけで写真の顔立ちには似てないよな

ニュー速カテゴリの最新記事