IA : Vision Humaine Recréée


Un groupe de scientifiques travaille sur l’entraînement des intelligences artificielles pour comprendre et interpréter les activités cérébrales afin de recréer ce qui est observé. Actuellement, leurs expériences reposent sur l’observation faite par un singe. Leur ambition est de réaliser les mêmes avancées en utilisant des données provenant des yeux humains.

Révolution Visuelle : Brain2GAN Reconstruit les Images Mentales en Détails

Imaginez un instant qu’il soit possible de recréer avec une précision étonnante ce que quelqu’un regarde, simplement en analysant son activité cérébrale. Ce qui semblait encore hier de la science-fiction devient aujourd’hui une réalité. En effet, des chercheurs sont parvenus à donner aux systèmes d’intelligence artificielle la capacité de se concentrer sur des régions cérébrales spécifiques pour reconstruire des images précises de ce qu’un singe regarde.

Les résultats sont tout simplement bluffants. Prenons l’exemple des travaux de Thirza Dado et de son équipe basée aux Pays-Bas. En utilisant des enregistrements cérébraux d’un macaque, ils ont réussi à recréer des images mentales avec une précision étonnante.

Une illustration de leurs travaux montre trois rangées d’images: la première rangée représente les images originales que regardait le singe, comme une chaise, un poisson et une araignée. La deuxième rangée montre les images reconstruites par l’IA en se focalisant sur certaines régions cérébrales et la troisième rangée montre les images reconstruites sans mécanisme d’attention. La différence est saisissante: lorsqu’une IA utilise un mécanisme d’attention, les reconstitutions sont beaucoup plus fidèles. Par exemple, un poisson ressemble réellement à un poisson avec ce mécanisme, alors que sans, il peut prendre une forme indéterminée, comme celle d’un petit pain rond.

14 000 films dans 1 millimètre cube de tissu cérébral

Imaginez-vous sur une plage, un livre ou un sudoku à la main. Votre cerveau est détendu, presque en mode ralenti, et pourtant, il emmagasine une quantité phénoménale d’informations. L’analyse complète d’un seul millimètre cube de tissu cérébral nécessite environ 1,4 pétaoctets de données, soit l’équivalent de 14 000 films en 4K.

Des experts en IA de Google et de l’Université de Harvard ont développé une technique avancée pour classer, organiser et étudier ce vaste contenu cérébral. Cette avancée n’est pas seulement impressionnante d’un point de vue technologique; elle ouvre également la voie à des applications révolutionnaires dans les domaines de la médecine et de la technologie.

Le projet a consisté à créer 225 millions d’images en deux dimensions à partir de 5 000 tranches ultrafines de tissu cérébral. Cette cartographie complexe a révélé la présence de 50 000 cellules et 130 millions de synapses. L’objectif est de comprendre en profondeur les connexions et fonctions cérébrales, aidant ainsi à démystifier les mécanismes complexes de notre cerveau.

Projet Obvious

Un collectif d’artistes français nommé Obvious a réussi l’exploit d’utiliser une intelligence artificielle pour recréer des images à partir de l’activité cérébrale. Ce projet, intitulé « Mind to Image », repose sur un modèle open source appelé MindEye, qui associe les images perçues aux activités cérébrales correspondantes.

Le processus commence par l’observation des zones cérébrales activées lorsque des artistes visualisent des portraits et des paysages dans une machine IRM. Ces données cérébrales sont ensuite utilisées pour entraîner l’IA, qui tente de reconstruire les images originales à partir des seules informations cérébrales. Les artistes imaginent différentes scènes, inspirées de descriptions textuelles, pendant que leur activité cérébrale est enregistrée. L’IA traite ensuite ces données pour générer des compositions visuelles. Bien que la précision soit variée, la méthode permet de recréer des images qui conservent les éléments sémantiques de la pensée des artistes, comme une montagne enflammée par de la lave. Inspiré du surréalisme, le projet vise à rapprocher autant que possible l’image mentale et la création artistique. Les œuvres seront présentées en octobre à Paris, et les artistes aspirent à explorer d’autres formats comme le son et la vidéo à l’avenir.