物体を追加しても影や回り込みをリアルに合成する技術 ワシントン大学が開発 2020/12/07 [朝一から閉店までφ★]
■ このスレッドは過去ログ倉庫に格納されています
Innovative Tech:
物体を追加しても影や回り込みをリアルに合成する技術 ワシントン大学が開発
2020年12月07日 12時25分 公開
[山下裕毅,ITmedia]
Innovative Tech:
このコーナーでは、テクノロジーの最新研究を紹介するWebメディア「Seamless」を主宰する山下裕毅氏が執筆。新規性の高い科学論文を山下氏がピックアップし、解説する。
米ワシントン大学の研究チームが開発した「People as Scene Probes」は、一方向から撮影した映像の奥行きや光の当たり方を分析する深層学習ベースの技術だ。この技術を使うことで、影や「オクルージョン」(遮蔽物によって光の反射がさえぎられる度合い、環境遮蔽とも) を考慮したリアルな画像合成が可能になる。
https://image.itmedia.co.jp/news/articles/2012/07/l_koya_probeteaser.png
映像内の物体から奥行き、オクルージョン、照明/影の情報を抽出し、新しく挿入する画像に適応することで自然な合成画像を生成するネットワークの概要図。下段の図では、手前の人物や奥の赤い車に対して適切な影が加えられている
今回の手法では、物体とシーンとの隠蔽関係をピクセルレベルで記録し、物体の位置に応じてどの画素がオクルージョンしているかを判断する。
https://image.itmedia.co.jp/news/articles/2012/07/l_koya_probe2.png
オクルージョンの定性結果。(左)オクルージョン合成した結果(右)オクルージョン前の画像
次に、シーン内の物体がどのような影を保持しているかを分析し、ライティングマップを作成する。これにより、新しい物体を挿入した際に、その位置の環境に応じた明るさと太陽に対して正しい方向にある影を生成する。
影は、太陽の位置や天候、物体とシーンとの関係などで相互作用する複雑なタスクなため、GAN(敵対的生成ネットワーク)を用いて詳細に再構築できるように学習する。
===== 後略 =====
全文は下記URLで
https://www.itmedia.co.jp/news/articles/2012/07/news079.html Hi, I am a Floridian staying in Japan.
As you know, according to an American news agency, Japan is ranked highly in COVID resilience ranking together with New Zealand and Korea.
However, in the point of how to tackle the epidemic, many people oversea think that it is another question whether Japan is a model country for them to learn from.
That is, there is no reproducibility about Japan; specifically, there is no action that was done by the Japanese government which we can find was effective against the epidemic.
That is quite contrary to the NZ and Korea which have a certain method to prevent it. Offensive as that may sound, in my eyes, the government did nothing.
This Japanese case shows us the cynical conclusion that, if the government does nothing, the people will be insecure and protect themselves carefully, and so the epidemic will be prevented, はいはい。これも犯罪ですね。りょうかいりょうかい。 >>4
雑コラ作成後AI補正ボタンポチでちゃんとしたコラに 金にならない技術とか意味ねーな
少なくとも日本では しかしこういう技術発展すればするほど
本物と偽物の区別がつきにくくなって
ますます疑心暗鬼になってしまうな。 >>7
特許とられたらすげえめんどくさいことになる可能性 写真をスキャンするだけで全裸3Dモデルが作れる技術はよ う〜ん、結局手動でやったほうが良さそう
動画に適用できるなら良いかも、時間軸の情報が使えるなら更に正確になるはずだし 不正選挙をリアルに暴く技術を開発しろW
なにが自由だ 合成する車の撮影角度は修正できないのか?
ボンネット写ってないと変だろ。あとジャギ取ろうぜ これを採用したらグーグルマップの3Dモードの立体物の精度が上がるのかな >>26
頭に「画像に」ってつけると心が落ち着く。 >>4 抗議活動の参加人数を好きなだけ増やせるからね 5人を500人にして「住民の半数が異を唱える核のごみの持込みに・・・」 昔からCGで行われているじゃんと思ったら、CGではなく実際の写真への合成か。 ■ このスレッドは過去ログ倉庫に格納されています