Sony lance le premier capteur photo "intelligent
Le nouveau capteur de Sony dispose de sa propre unité logique. Celle-ci analyse l'image en temps réel et transmet des informations sémantiques au lieu de pixels.
L'analyse d'image par intelligence artificielle est omniprésente. Dans les appareils photo, par exemple, pour l'autofocus, l'IA permet de détecter automatiquement les yeux, les visages et les sujets en mouvement. Jusqu'à présent, le capteur transmettait les données non traitées à une unité de calcul qui les analysait. Le nouveau capteur IMX500 dispose d'une puce logique intégrée : L'analyse de l'image a déjà lieu au niveau du capteur. Selon Sony, il s'agit d'une première mondiale.
Le capteur est destiné à être utilisé dans le domaine de l'industrie et de l'Internet des objets. Il ne retransmet pas l'image pixelisée proprement dite, mais uniquement des informations sémantiques sur ce qui est visible sur l'image. Cela nécessite beaucoup moins d'espace mémoire et se fait donc pratiquement sans délai. Apparemment, l'IA sur le capteur lui-même est assez rapide pour créer ces informations en temps réel.
Les caméras de surveillance dans l'industrie génèrent d'énormes quantités de données qui sont stockées dans le cloud. Là encore, le faible espace de stockage sera un avantage. En outre, les exigences en matière de protection des données devraient être mieux respectées si une seule information est stockée au lieu de la photo.
La puce est en principe capable de produire et de transmettre une photo traditionnelle. Ou un cadrage comme la tête. Ou une version en noir et blanc. Le résultat exact dépend de la configuration et des souhaits de l'utilisateur.
Selon le domaine d'application, les clients peuvent utiliser un modèle d'IA différent pour l'analyse des images. Pour ce faire, la mémoire interne est réécrite en fonction des besoins spécifiques ou des conditions du lieu d'utilisation du système.
Par exemple, si plusieurs caméras utilisant le capteur sont installées dans un magasin, un seul type de caméra permet de couvrir différents sites, conditions, horaires ou objectifs.
Exemples cités par Sony : si la caméra est installée à l'entrée d'un magasin, elle peut être utilisée pour compter les clients. Si elle est installée sur une étagère, elle permet de détecter les produits manquants. Si la caméra est installée au plafond, elle peut être utilisée pour créer des images thermiques (afin d'identifier les zones où de nombreux clients se rassemblent). En outre, le modèle d'IA dans une caméra peut être réécrit, de sorte que, par exemple, un modèle de détection des cartes de chaleur devienne un modèle de détermination du comportement des clients.
Le capteur mesure 1/2,3 pouce et offre une résolution de 12,3 mégapixels. Il existe en tant que puce seule (IMX500) et en tant que package avec un LGA céramique (IMX501). Il reste à voir dans quelle mesure cette technologie peut être adaptée aux appareils photo ordinaires.
Mon intéret pour l'informatique et l'écriture m'a mené relativement tôt (2000) au journalisme technique. Comment utiliser la technologie sans se faire soi-même utiliser m'intéresse. Dans mon temps libre, j'aime faire de la musique où je compense mon talent moyen avec une passion immense.