La caméra conçue par l’IA n’enregistre que les objets d’intérêt tout en étant aveugle aux autres

La caméra conçue par l'IA n'enregistre que les objets d'intérêt tout en étant aveugle aux autres

Imagerie spécifique à une classe d’objets à l’aide d’une caméra diffractive. a Illustration d’une caméra diffractive à trois couches entraînée pour effectuer une imagerie spécifique à une classe d’objets avec un effacement tout optique instantané des autres classes d’objets à sa sortie FOV. b La configuration expérimentale pour les tests de caméra diffractive utilisant un éclairage THz cohérent. Le crédit: eLight (2022). DOI : 10.1186/s43593-022-00021-3

Au cours de la dernière décennie, les appareils photo numériques ont été largement adoptés dans divers aspects de notre société et sont massivement utilisés dans les téléphones mobiles, la surveillance de sécurité, les véhicules autonomes et la reconnaissance faciale. Grâce à ces caméras, d’énormes quantités de données d’image sont générées, ce qui soulève des inquiétudes croissantes quant à la protection de la vie privée.

Certaines méthodes existantes répondent à ces préoccupations en appliquant des algorithmes pour masquer les informations sensibles des images acquises, telles que le flou d’image ou le cryptage. Cependant, de telles méthodes risquent toujours d’exposer des données sensibles car les images brutes sont déjà capturées avant de subir un traitement numérique pour masquer ou crypter les informations sensibles. De plus, le calcul de ces algorithmes nécessite une consommation électrique supplémentaire. D’autres efforts ont également été déployés pour trouver des solutions à ce problème en utilisant des caméras personnalisées pour dégrader la qualité de l’image afin que les informations identifiables puissent être dissimulées. Cependant, ces approches sacrifient la qualité globale de l’image pour tous les objets d’intérêt, ce qui n’est pas souhaité, et elles sont toujours vulnérables aux attaques adverses pour récupérer les informations sensibles qui sont enregistrées.

Un nouvel article de recherche publié dans eLight a démontré un nouveau paradigme pour obtenir une imagerie préservant la confidentialité en construisant un type d’imageur fondamentalement nouveau conçu par l’IA. Dans leur article, les chercheurs de l’UCLA, dirigés par le professeur Aydogan Ozcan, ont présenté une conception de caméra intelligente qui n’image que certains types d’objets souhaités, tout en effaçant instantanément d’autres types d’objets de ses images sans nécessiter de traitement numérique.

Cette nouvelle conception de caméra consiste en des surfaces transmissives successives, chacune composée de dizaines de milliers de caractéristiques diffractives à l’échelle de la longueur d’onde de la lumière. La structure de ces surfaces transmissives est optimisée à l’aide d’un apprentissage en profondeur pour moduler la phase des champs optiques transmis de sorte que la caméra n’image que certains types/classes d’objets souhaités et efface les autres. Après sa conception basée sur le deep learning (formation), les couches résultantes sont fabriquées et assemblées en 3D, formant la caméra intelligente. Après son assemblage, lorsque les objets d’entrée des classes d’objets cibles apparaissent devant lui, ils forment des images de haute qualité à la sortie de la caméra, comme vous le souhaitez. En revanche, lorsque les objets d’entrée devant la même caméra appartiennent à d’autres classes indésirables, ils sont optiquement effacés, formant des motifs non informatifs et de faible intensité similaires à du bruit aléatoire.

Étant donné que les informations caractéristiques des classes d’objets indésirables sont entièrement effacées optiquement à la sortie de la caméra par diffraction de la lumière, cette caméra conçue par l’IA n’enregistre jamais leurs images directes. Par conséquent, la protection de la vie privée est maximisée puisqu’une attaque contradictoire qui a accès aux images enregistrées de cette caméra ne peut pas ramener les informations. Cette fonctionnalité peut également réduire la charge de stockage et de transmission des données des caméras puisque les images d’objets indésirables ne sont pas enregistrées.

Pour démontrer expérimentalement cette caméra unique spécifique aux données, l’équipe de recherche de l’UCLA l’a conçue pour imager spécifiquement et sélectivement une seule classe de chiffres manuscrits, et a fabriqué la caméra conçue à l’aide de l’impression 3D. Cette caméra imprimée en 3D a été testée à l’aide d’ondes térahertz éclairant des chiffres manuscrits. Conformément aux principes fondamentaux de sa conception, la caméra intelligente a pu imager de manière sélective les objets d’entrée uniquement s’il s’agissait de chiffres manuscrits “2”, tout en effaçant instantanément tous les autres chiffres manuscrits des images de sortie, produisant des caractéristiques de type bruit de faible intensité. .

En plus des chiffres manuscrits, les chercheurs de l’UCLA ont également démontré une autre variante de la même conception d’appareil photo spécifique à la classe en imageant sélectivement un type de produit de mode (par exemple, un pantalon), tout en effaçant instantanément d’autres produits de mode de la sortie de l’appareil photo. L’équipe de recherche a rigoureusement testé la conception de sa caméra dans des conditions d’éclairage variables qui n’ont jamais été incluses dans sa formation, et a montré que cette caméra intelligente est robuste aux variations d’éclairage.

Au-delà de l’imagerie spécifique à la classe de données, cette conception de caméra basée sur l’IA a également été utilisée pour construire des caméras de cryptage, offrant une couche supplémentaire de sécurité et de protection de la vie privée. Une telle caméra de cryptage, conçue à l’aide de couches diffractives optimisées pour l’IA, effectue optiquement une transformation linéaire sélectionnée, exclusivement pour les objets cibles d’intérêt. Seuls ceux qui ont accès à la clé de déchiffrement (c’est-à-dire la transformation linéaire inverse dans ce cas) peuvent récupérer l’image originale des objets cibles. D’autre part, les informations des autres objets indésirables sont irréversiblement perdues puisque la caméra conçue par l’IA les efface tout optiquement à la sortie. Par conséquent, même si la clé de déchiffrement est appliquée aux images enregistrées, elle produit des caractéristiques de type bruit, non reconnaissables pour d’autres classes d’objets indésirables.

À l’exception de la lumière d’éclairage, cette caméra intelligente ne nécessite aucune alimentation externe pour son calcul et fonctionne à la vitesse de la lumière. Par conséquent, il est rapide, économe en données et en énergie, ce qui le rend particulièrement adapté aux applications d’imagerie spécifiques à une tâche, respectueuses de la vie privée et à puissance limitée. Les enseignements de base de cette conception de caméra diffractive peuvent inspirer les futurs systèmes d’imagerie qui consomment des ordres de grandeur moins de puissance de calcul et de transmission de données.

Cette recherche a été dirigée par le professeur Aydogan Ozcan, directeur associé du California NanoSystems Institute (CNSI) et de la chaire Volgenau pour l’innovation en ingénierie au département de génie électrique et informatique (ECE) de l’UCLA, avec la professeure Mona Jarrahi, du Northrop Grumman Endowed Président et directeur du laboratoire d’électronique Terahertz à UCLA ECE. Les autres auteurs de ce travail comprennent les étudiants diplômés Bijie Bai, Yi Luo, Tianyi Gan, Yuhang Li, Yifan Zhao, Deniz Mengu et le chercheur postdoctoral Dr Jingtian Hu, tous du département ECE de l’UCLA.


Récupération de phase entièrement optique et imagerie de phase quantitative effectuées instantanément sans ordinateur


Plus d’information:
Bijie Bai et al, Imager ou ne pas imager : caméras diffractives spécifiques à une classe avec effacement tout optique des objets indésirables, eLight (2022). DOI : 10.1186/s43593-022-00021-3

Fourni par UCLA Engineering Institute for Technology Advancement

Citation: La caméra conçue par l’IA n’enregistre que les objets d’intérêt tout en étant aveugle aux autres (15 août 2022) récupéré le 15 août 2022 sur https://techxplore.com/news/2022-08-ai-designed-camera.html

Ce document est soumis au droit d’auteur. En dehors de toute utilisation loyale à des fins d’étude ou de recherche privée, aucune partie ne peut être reproduite sans l’autorisation écrite. Le contenu est fourni seulement pour information.