ジョジョのキャラクター風に顔写真を変換する「JoJoGAN」 1枚の画像からAIが学習  [156193805]

1 ::2022/01/06(木) 18:50:45.34 ID:6ehE2mvL0●.net ?PLT(16500)

米イリノイ大学アーバナ・シャンペーン校の研究チームが開発した「JoJoGAN: One Shot Face Stylization」は、入力した1枚の顔画像を漫画「ジョジョの奇妙な冒険」のキャラクター風に変換する機械学習フレームワークだ。「空条承太郎」など、作中のキャラクタースタイルに似せた顔に変換する。このフレームワークは、大量のペア画像データセットを使わず、1枚の顔画像から学習できる特性を持つ。

画像をスタイル変換するモデルは、大量のペア画像データセットを必要とするが、そのデータを準備するにはコストがかかる。数枚の画像からスタイル変換する研究も報告されているが、詳細なスタイルや多様性を捉えきれず、画質も不十分だ。

この手法では、1枚の参照画像から近似するペア画像データを先に生成し、それを学習に使用する方法でこの問題に取り組む。具体的には、1枚の参照スタイル画像をGANで反転して実写に対する潜在変数を取得し、Random Style Mixingを行うことで近似のペア画像データセットを作成する。

得られた近似のペア画像データセットには、さまざまな色特性を持つサブセットも含まれる。ペア画像データセットを生成した後は、事前に学習させたStyleGANを微調整する

変換した顔画像を評価するために、先行研究の類似手法(StyleGAN -NADA、BlendGAN)で出力した画像と比べた結果、他の類似手法よりもこの手法の方が、入力画像の顔のアイデンティティーを保持したまま、目の形や線の太さなどの詳細な特徴を捉えた画像を生成できると分かった。

Webブラウザ上で任意の顔画像をジョジョ風などに変換できるデモサイトも公開されている。試してみると、以下のような結果が出力された。

https://www.itmedia.co.jp/news/articles/2201/06/news037.html




49 ::2022/01/06(木) 20:01:09.66 ID:x9LiLGsH0.net

海外のジョジョ人気は凄い

7 ::2022/01/06(木) 18:56:36.07 ID:k/iqibC50.net

それよりこれどうなったんだよ...
https://gigazine.net/news/20210529-haguyatsu/

27 ::2022/01/06(木) 19:11:09.30 ID:+50/AK+g0.net

なんか違う

8 ::2022/01/06(木) 18:56:43.90 ID:1ZoLSfLW0.net

仕上がり微妙だな。有料なら金返せとか言われるレベル

26 ::2022/01/06(木) 19:10:46.64 ID:34qGEQYU0.net

でも黒人は認識できないんでしょ?

36 :名無しさんがお送りします:2022/01/06(木) 19:34:11.94 ID:YA1ZduzDq

髪と骨格以外ほぼ同一じゃねえか

25 ::2022/01/06(木) 19:10:22.06 ID:0BvfxvLv0.net

目がワンパターンじゃあないか

10 ::2022/01/06(木) 18:58:23.28 ID:6is5Srbm0.net

ペッシや重ちーみたいに変換されないのか

40 ::2022/01/06(木) 19:44:52.57 ID:6Wn5Idnj0.net

オインゴボインゴ風味が足りない

61 ::2022/01/06(木) 20:50:46.56 ID:BZoWMhOh0.net

目が違う

9 ::2022/01/06(木) 18:57:14.45 ID:8XQs10Gv0.net

違う

34 ::2022/01/06(木) 19:26:29.89 ID:UAig/RHT0.net

ジョジョではないな

32 ::2022/01/06(木) 19:23:23.48 ID:nDWKVmdn0.net

>>1
外側だけで中身を考慮してなくて草
やっぱヲタが作っただけある

46 ::2022/01/06(木) 19:56:36.37 ID:uWcEtuqr0.net

目が一緒なのがコワイ

58 ::2022/01/06(木) 20:22:15.85 ID:KKUMuNYA0.net

ヘブンズドアーで顔の形変えられたらなぁ、やっぱり記憶だけ?

52 ::2022/01/06(木) 20:08:52.52 ID:v7Tv083J0.net

おまえらはしげちーな

53 ::2022/01/06(木) 20:12:14.62 ID:0CzGE09r0.net

>>51
かっけぇ!

38 ::2022/01/06(木) 19:36:24.21 ID:A+OKK5KI0.net

漫☆画太郎風になるやつが欲しい

57 ::2022/01/06(木) 20:21:36.09 ID:EsSVuV/30.net

安倍はよ

19 ::2022/01/06(木) 19:02:44.53 ID:kBxf2mlC0.net

面白い

5 ::2022/01/06(木) 18:54:20.45 ID:DMYemjhF0.net

アメリカ風味が入ってる

28 ::2022/01/06(木) 19:13:46.64 ID:Ddlvv3La0.net

死ね消えろ死ね

2 ::2022/01/06(木) 18:52:31.94 ID:ycxf26yw0.net

何でもかんでもAIAI言う今の社会に違和感
ただのマスデータとアルゴリズム処理だろ

2 ::2022/01/06(木) 18:52:31.94 ID:ycxf26yw0.net

何でもかんでもAIAI言う今の社会に違和感
ただのマスデータとアルゴリズム処理だろ

67 ::2022/01/06(木) 20:57:34.17 ID:yHxD4P5f0.net

怖い顔を作るアプリは結構使える

56 ::2022/01/06(木) 20:19:46.93 ID:C5BsTlye0.net

>>2
文系の奴ほどそうだよね
シンギュラリティとかwww

62 ::2022/01/06(木) 20:51:42.52 ID:JI3ctrMj0.net

思ったよりクオリティが低くてコレジャナイ感が凄い

39 ::2022/01/06(木) 19:44:20.83 ID:+W7bRRrd0.net

モデルになってるのが美男美女で顔立ち整ってるやつばっかりやん
もっと癖のあるやつをサンプルにしろよ

48 ::2022/01/06(木) 20:00:33.57 ID:f/MW00uW0.net

メメタア

31 ::2022/01/06(木) 19:21:08.82 ID:b7br8SpO0.net

>>1
これはできるんじゃ?

66 ::2022/01/06(木) 20:55:40.84 ID:lvRuNN+K0.net

北条司の方が似せやすそうだな

55 ::2022/01/06(木) 20:18:03.20 ID:ax/2hKZe0.net

YouTubeで見たジョジョ風アイキャッチ作ってみたってシリーズみたいな感じかと思ったら違うんだね

21 ::2022/01/06(木) 19:03:58.93 ID:LcLFwsrA0.net

あの人今でも手書きやからAIで設定されるのはコレジャナイ感が

54 ::2022/01/06(木) 20:14:40.51 ID:4edv9wfq0.net

高橋陽一のキャラクター風なんかもやってほしい(全員同じ顔)

20 ::2022/01/06(木) 19:03:47.23 ID:khiuYLCb0.net

思ったよりつまらなかった
もうちょっと、こう…

65 ::2022/01/06(木) 20:54:09.23 ID:UU380OL10.net

なんでアニメの絵でやるかな
荒木の絵でやれよ
センスゼロかよ

11 ::2022/01/06(木) 18:58:29.91 ID:1ZoLSfLW0.net

>>7
なんすかこれ?これに今田美桜ちゃんの写真いれても脱がせる事できないのかな?

69 ::2022/01/06(木) 20:58:46.32 ID:zVYiNBWg0.net

>>67
やめろ

18 ::2022/01/06(木) 19:01:31.90 ID:gstdNTov0.net

なんか目がギラギラしとるな

37 :名無しさんがお送りします:2022/01/06(木) 19:39:13.11 ID:3tn6HZ/EG

無駄ぁぁぁああああああああ!!!!!!!!!!!!!!!

やれやれだぜ

23 ::2022/01/06(木) 19:05:34.83 ID:jDaDOP5s0.net

30 ::2022/01/06(木) 19:19:53.04 ID:HJQRzoQ+0.net

全然ジョジョじゃない件

44 ::2022/01/06(木) 19:55:31.37 ID:SWDEVTlL0.net

ポーズは?

14 ::2022/01/06(木) 18:59:12.76 ID:rE/psywM0.net

ギョギョッ!

59 ::2022/01/06(木) 20:27:14.24 ID:hy786OPS0.net

カブトムシのスタンドって居たよね
人の舌を好んで食べてたよね

45 ::2022/01/06(木) 19:56:06.95 ID:Tn+TWXz90.net

カイジ風になったら起こして

64 ::2022/01/06(木) 20:54:04.73 ID:tPxxzSPI0.net

>>2
コミュ障エンジニアは知識ない人相手でも専門用語使うもんな

6 ::2022/01/06(木) 18:55:23.97 ID:34qGEQYU0.net

でもこれ表情を似せてるだけで写真の顔立ちには似てないよな

50 ::2022/01/06(木) 20:01:37.45 ID:PMGtIrJc0.net

全身写真でジョジョポーズになるんならバズるやも知れぬ

13 ::2022/01/06(木) 18:58:46.90 ID:OjbJQSmc0.net

進撃風だが

おすすめの記事