ラドボウド大学の神経科学者のチームは、ニューラル ネットワークを使用してスケッチを実際の顔に変換するモデルに取り組んでおり、これまでのところ、提供された結果は非常に満足のいくものであるようです。科学者らによると、このモデルは芸術的な解決策だけでなく、専門家が証人の説明から作成した図面を犯罪者の本当の顔に変換する必要がある法医学分野でも機能するという。

この作品では、ニューラル スタイル転送に基づく別の最近の作品からインスピレーションを得ました。ニューラル スタイル転送は、実際の写真に基づいて、あたかも古典芸術家によって不滅化されたかのように場所を再想像するアルゴリズムです。これを参考にして、逆のプロセスはどのように機能するのかを考えました。それは、比較的正確に描かれた図面の顔写真を撮ることです。

ニューラル ネットワークを機能させるには、まず写真とスケッチを照合する巨大なデータベースを構築する必要があります。スケッチが提供され、写真に変換するよう依頼され、ある技術を使用してランダムに作成されます。最初は、写真は現実との類似性を維持するのには程遠いですが、システムが完成するにつれて、まさにエラーとフィードバックがシステムに供給されます。

最後のいくつかの手順を何度も繰り返すと、写真は実際の写真と信じられないほど似たものになります。したがって、すべてがうまくいけば、システムはすでに分析されたスケッチだけでなく、新しいスケッチを変換するためにも使用できます。アルゴリズムをトレーニングするために、研究者らは、有名人の画像が 200,000 枚以上含まれているCelebAデータベースからコンピュータで生成されたスケッチと、CUFS データベースに保存されている手描きのスケッチを使用しました。

前述したように、このシステムは警察と司法の分野で大きな役割を果たすことができ、少なくとも治安部隊が犯罪を犯した人物がどのような人物であるかという考えに非常に近づけるのに役立ちます。証人は頭の中で忠実だと思っている。

参考資料一覧

  1. https://techcrunch.com/2016/07/24/researchers-use-neural-networks-to-turn-face-sketches-into-photos/

将来のセキュリティにおけるニューラル ネットワークの役割・関連動画