【IT】リアルタイムで性別変換してしまう話題のカメラフィルターのすごさをAI研究者が分析
■ このスレッドは過去ログ倉庫に格納されています
リアルタイムで性別変換してしまう話題のカメラフィルターのすごさをAI研究者が分析
男性が自分の顔をカメラで写すと瞬間的に顔が女性に変化し、顔の向きを変えたり表情を変えるとリアルタイムでその変化が「女性の表情」として表現される……といったことが可能な性別交換フィルターを写真共有アプリのSnapchatがリリースしました。もちろん女性から男性への変換も可能で、あまりの精度の高さゆえ、フィルター目的で新たにSnapchatをインストールする人が続出するほどの機能となっており、AIを開発するGoogle Brainチームのエリック・チャンさんがこのフィルターのすごさについて分析しています。
Eric Jang: Fun with Snapchat's Gender Swapping Filter
https://blog.evjang.com/2019/05/fun-with-snapchats-gender-swapping.html
Snapchatがリリースした「性別交換フィルター」がどんなものなのかは以下から確認可能。カメラが男性の顔を認識すると、瞬間的に女性の顔に変換されます。しかも顔の動きや表現はリアルタイムに女性に変換されていくので、もはや女性を撮影しているとしか思えません。
https://twitter.com/JoseMPadilla4/status/1127353860052475906
フィルターを利用して1人デュエットを実現させる人もいました。
https://twitter.com/EkEkMabaho/status/1127857876888801280
チャンさんは自身のブログで「機械学習アルゴリズムを使ったことがある人が見れば、この機能は魔法のように強力です」と述べています。
一体どういう仕組みなのだ?ということで、チャンさんは実際にアプリをダウンロードして性別交換フィルターには何ができて何ができないのかを実際に確かめてみたとのこと。まず、以下の3枚の写真のうち中央が無加工のチャンさんで、左側が「男性フィルター」、右側が「女性フィルター」を追加したもの。
https://i.gzn.jp/img/2019/05/14/snapchats-gender-swapping/001.jpg
フィルターの特徴の1つがインターネット接続なしでリアルタイムで性別交換をやってのけるということ。帽子を脱ぐときの髪の表現まで自然です。クリックするとGIFアニメーションで帽子を脱ぐ瞬間を見ることが可能。帽子に手をかけて…………
https://1.bp.blogspot.com/-b2wOAc5YD9E/XNi00oUE6DI/AAAAAAAAQQw/XVzyfLMTXdcg00hJIJdMgE8hBPVTUYbMQCLcBGAs/s1600/beanie.gif
後ろ方向に帽子をずらしていくと、それに合わせて髪の毛がふわっとした動きつきで現れます。
場所の明るさ・暗さを問わずにフィルターは適用されますが、髪のかげは本人の体に落ちません。
ただし、髪は光源の影響を受けます。以下の写真を見ると左側の髪がしっかりと光を反射していることがわかります。フィルターが光源を反映するため、性別交換後の様子も非常に自然に見えるわけです。
※中略
このフィルターはSnapchatがこれまで収集してきた何十億というデータを利用したものであり、「機械学習アルゴリズム『CycleGAN』を使っているのではないか?」というのがチャンさんの印象です。CycleGANはGANでスタイル変換する手法の1つで、形状や位置がバラバラな画像からでも学習して変換が可能になります。チャンさんは、ペアになっていないオブジェクトをグラウンド・トゥルースでペアにした限定的なデータセットを用いることで、CycleGANは正則化しているとみています。
また、顔と髪は別々のレイヤーで合成されており、「アルファチャンネルでGANが利用されているのを見たのはこれが初めてだ」とチャンさん。髪が全てGANで生成されているかどうかは微妙なところだそうですが、ハイライトの変化や障害物によって髪色が変わるところは、データから学習していることを示しているそうです。一方で、髪の表現が非常に安定しているがために完全にGANで生成されているかどうかには疑いがあるとしています。東南アジアの男性の顔が東アジア系の女性のヘアスタイルに代わるアプリは少なく、ここから大量のヘアスタイルのライブラリがあることも推測できるとのことです。
https://gigazine.net/news/20190514-snapchats-gender-swapping/
2019年05月14日 19時00分 Gigazine
https://twitter.com/5chan_nel (5ch newer account) >>1
骨格からして変わってしまってるな
目元だけ残すのか >>7
口と鼻がほぼそのままじゃね
目を弄って、目鼻口の顔の中心パーツ以外総取り替えな感じ 俺のスマホだとなぜか写真でしかこの機能使えなかった 少し禿げてるおじさんでも大丈夫なの?
(´・ω・`)これがあれば一人でデートできそうだな これで自分好き度が計れそう
そっくりカップルとかも自分好きの延長に思う どうせ通信が必要なんだろ
それはフィルターとは呼ばない これ変換後の顔を再度変換したら元の顔にちゃんと戻るです? >>22
非実在青少年が実在するというよくわからん状況か。。 チャンさんは耳なし芳一だったんか。耳、どこにやった? レビュー見たら散々だったぞ
怖くて落とさなかったわ このフィルター作ったやつは何者だという話になってきそう
あっさり凄いことしちゃってる
これまで映画で苦労して実現してきたVFX技術が、いきなり一般人のとこまで降りてきた
他社が真似出来ないとなったら開発会社の株価凄いことになりそう >>29
なるほど
ゲイポルノがレズポルノに変身するのか >>30
性別変更も凄いけど、年齢変更の方がかなりのインパクトあるよ
ババアがJKに戻れる 最近よく貼られてたオタっぽいデブ兄ちゃんの裸が女性みたいに魔改造されてるコラ早よw 年寄りがやったらどうなるのかな?
婆さんに変身する? 初見で見抜けないレベルの動画フィルターというのが凄い
ベンジャミンバトンとか必死こいて作ってたのが、もう過去になってしまった 髭で誤魔化されてるけど元の顔自体が中性的な作りやんけ。ワッキーみたいな顔でやれや 自分の写真撮ってみたらただのケバいおばさんでわろた 透過してキンタマついてるか瞬時に判別してるんでしょ? 「俺の母ちゃんソックリの顔になって萎えた」とネットで話題 >>3
女は化粧や髪やらで誤魔化しているが男の方が美形なんだよ >>13
俺もだわ
そして眉毛がもともと濃くないので
ほとんど無くなって変な感じ >>13
俺も。
動画はどうやったら撮れるんだろ?
課金しないとダメってか? >>43
動物のオスだと飾り毛とかタテガミとか分かりやすいよね
鳥はメスの方が間違いなく地味だし 本人の目鼻に似たような形の異性のパーツを持ってきて並べてる感じだね。 おもしろそうだからダウンロードしてみたけど、使うにはユーザー登録して電話番号も入れないといかんみたいだったので断念した 常々「女みたいな顔」って言われてるから
自分の男らしい顔も見てみたいな >>69
その先には「登録してる連絡先に通知する」なんてのも出てくる
友人とシェアしましょう!とかクソ恐ろしいわ
しかもそれを拒否する×マークが画面の端っこで超ちっさいの
データ集めることしか考えてねー、怖い ヒゲ生えてると割とダメだな
剃ってからやってみるか そのうち任意の顔を大統領や将軍に置換するのも可能に 自分が女としてうまれたらどんな顔だろうって思うことはある たぶん広瀬すず似だとおもうから試してみたい やってみたらスナックのママみたいな顔になったよ
叔母さんに似てるかな
違うモードにしたら宝塚みたいになったw
ちなみに俺はゴツいおっさんw >>71
膨大に集めた顔のデータを再配置してモンタージュ写真作るシステムだからな。
加齢のシミュレーションなんかもできると思う。 何枚か撮って見たけど単にまつ毛伸びた自分で草も生えない >>77
そう言うのは有ると思う
明るい場所で試したらOLっぽくなったが暗いところだと飲み屋のママみたいになったよ
色の違いやシワの感じまで読み取られてるみたいだ >>78
その場合は女➡男のモードで遊ぼう
外人みたいになって面白いぞw >>77
そんなシステムなんだろうけど単に化粧した自分の顔になるのはなんなんだろうな
そこまでパターン的な顔なんだろうかw >>83
こんなんでも割と自分の顔が残ってるのが怖いw >>82
まあ、もとの顔を女にしたらどうなるかってアプリだしさ
工事現場で遊んだら女はデブはおばさんになってさ
鳶はエロ女になったよw
所長のおっさんが超ストライクな感じになったよ
怒られてる時は美人化したおっさんを妄想して耐えるんだよw あ、コレだとちょっと柔らかい感じ出てるかも
https://i.imgur.com/KGroArI.jpg
自撮りにハマる女の気持ち分かるわ 試してみたけど、カメラロール内にある写真の中からアプリが顔と認識したものとの合成も可能だな
俺はどうあがいても美形にはならんかったが、デューク東郷の顔とかになれるのは面白いと思った コレ男がやったらダメなアプリだ
奇跡の一枚を求めて延々とやり続けてしまう >>30
キマシタワ…いややはりキマセンデシ…うーんワケガワカラナイデスワー 技術的に凄いってことは分かるんだが、どんな需要があるんだ?
身体の性別と心の性別が合致していない人たち用か? こんなゴリラがこんなにかわいくなるなら
ブスもかわいくなるのか? >>29
作った人はとっくに超有名人だよ
これで会社起こして資産20億ドルとかの大富豪になってる サンプルが悪い。こんな性転換した元女みたいなやつじゃなくて、柔道篠原みたいな男でやってくれ 男がこれやると母親似になる。女がこれやると父親似になる。萎えるわー。 >>62
すまん
服と背景で身ばれするんで無理
俺の職場観光地なんよ これ、BBAをロリ化するとか赤ちゃんを大人化するとかそういう方向性も
似たアプローチで出来るんじゃないの? これなら、
読売テレビの性別判定企画に文句をつけた連中も、
何も言えなくなるね。 >>108
BBAロリ化か・・・
もし実現すればクソフェミが減るかもワンチャン なんか定期的に変化要素入れ替えるんだな
リアルタイムで髪伸びるのは無いやうだけど >>112
てか、同一人が若かった頃のデータは普通はあるんだから
一番容易で正確さが高い再現が出来ると思われる。 これができるんだから津田某の左右反転写真なんかずっと簡単にできるはずだが 色々試してみたけどお袋に似てるかって言ったら似てないな
父方の祖母の兄弟にこんなの居るわって感じになる ■ このスレッドは過去ログ倉庫に格納されています