瞬きしないでください: Facebook は目を閉じた写真を修正する計画を立てています

私たちはまばたきのタイミングをコントロールすることができず、残念なことに、まばたきがカメラのシャッターをクリックすると同時に起こることが多く、まぶたを完全に使いこなしている他の人にとっては写真が台無しになってしまいます。 Photoshop に熟達している場合や、コメディのギョロ目のルートを希望する場合を除いて、この写真は基本的に無駄です。

Facebook の賢いテクノロジーが日の目を見ることがあれば、これらの写真は失われないかもしれません。このシステムは、「敵対的生成ネットワーク」(GAN) を使用して 2 つの機械学習システムを学習します。1 つ目は目が開いているか閉じているかを認識し、2 つ目は最初のシステムを偽物でだますのが最善です。これは好循環です。2 番目の AI が偽物をうまく扱えるようになればなるほど、前者は偽物を発見する能力が向上し、2 番目の AI がさらに改良されることになります。最終的には人間が画像が加工されていることが分からなくなるまでです。

単にデータベースから無難に見える目を選んでミスター・ポテト​​ヘッド風に貼り付けるだけではありません。代わりにFacebookは、同じ人物が目を開いた写真を調べることによって模範的なデータを使用している。そこから、GAN は色や形から位置に至るまで目の周りの領域を正確に模倣することができます。

人に偽の目を貼り付けるのは、ある意味なんとも言えず不気味に見えるだろうと思うかもしれないが、その結果は驚くほど印象的で、研究論文には、有名人が突然目を見開いた「使用前と使用後」のショットの例がたくさん掲載されている。テストでは、ほとんどの人間の回答者は、どれが人工的に加工されたものであるかを自信を持って言えませんでした。 dont_blink_facebook_has_a_plan_to_fix_your_closed-eye_photos

左側の写真は参考写真、中央の写真は実際の写真、右側の写真は GAN が無難な偽物を作成しようとしたものです。

(Facebook が目を閉じたセレブのこれほど豊富な宝庫をどうやって見つけたのか不思議に思うかもしれませんが、主な情報源はペプシのパキスタンの光のリットル キャンペーンのようです。このキャンペーンでは、同国の有名人がハッシュタグ #EyesClosedForLight を付けて目を閉じてポーズをとりました。)

完璧ではありません。一部の写真では色のマッチングが少し不安定で、まばたきする目が眼鏡や髪で隠れていると、結果がわずかに異なります。おそらく、より重要なのは人的要因です。まばたきのタイミングが悪い場合は修正できるかもしれませんが、アルゴリズムが顔のあらゆる面を研究しているという知識から生じる不安を払拭することはできません。