Des chercheurs de l'Université d'Helsinki ont développé une technique dans laquelle un ordinateur modélise la perception visuelle en surveillant les signaux du cerveau humain. D'une certaine manière, c'est comme si l'ordinateur essayait d'imaginer ce à quoi un humain pense. Grâce à cette imagination, l'ordinateur est capable de produire des informations entièrement nouvelles, telles que des images fictives jamais vues auparavant.
La technique est basée sur une nouvelle interface cerveau-ordinateur. Auparavant, des interfaces cerveau-ordinateur similaires étaient capables d'effectuer une communication unidirectionnelle du cerveau à l'ordinateur, comme épeler des lettres individuelles ou déplacer un curseur.
Pour autant que l'on sache, la nouvelle étude est la première où la présentation informatique des informations et les signaux cérébraux ont été modélisés simultanément à l'aide de méthodes d'intelligence artificielle. Les images qui correspondaient aux caractéristiques visuelles sur lesquelles les participants se concentraient ont été générées par l'interaction entre les réponses du cerveau humain et un réseau neuronal génératif.
L'étude a été publiée dans le Rapports scientifiques journal en septembre. Rapports scientifiques est une revue multidisciplinaire en ligne à accès libre des éditeurs de Nature.
Modélisation générative neuro-adaptative
Les chercheurs appellent cette méthode la modélisation générative neuroadaptive. Au total, 31 volontaires ont participé à une étude qui a évalué l'efficacité de la technique. Les participants ont vu des centaines d'images générées par l'IA de personnes d'aspect divers pendant que leur EEG était enregistré.
On a demandé aux sujets de se concentrer sur certaines caractéristiques, comme les visages qui avaient l'air vieux ou qui souriaient. Tout en regardant une série d'images de visage présentées rapidement, les EEG des sujets ont été envoyés à un réseau neuronal, qui a déduit si une image était détectée par le cerveau comme correspondant à ce que les sujets recherchaient.
Sur la base de ces informations, le réseau de neurones a adapté son estimation au type de visages auxquels les gens pensaient. Enfin, les images générées par l'ordinateur ont été évaluées par les participants et elles correspondaient presque parfaitement aux caractéristiques auxquelles les participants pensaient. La précision de l'expérience était de 83%.
La technique combine les réponses humaines naturelles avec la capacité de l'ordinateur à créer de nouvelles informations. Dans l'expérience, les participants n'ont été invités à regarder que les images générées par ordinateur. L'ordinateur, à son tour, a modélisé les images affichées et la réaction humaine envers les images en utilisant les réponses du cerveau humain. À partir de là, l'ordinateur peut créer une image entièrement nouvelle qui correspond à l'intention de l'utilisateur. «
Tuukka Ruotsalo, chercheur à l'Académie de Finlande à l'Université d'Helsinki, Finlande et professeur associé à l'Université de Copenhague, Danemark
Des attitudes inconscientes peuvent être exposées
La génération d'images du visage humain n'est qu'un exemple des utilisations potentielles de la technique. L'un des avantages pratiques de l'étude pourrait être que les ordinateurs peuvent augmenter la créativité humaine.
«Si vous voulez dessiner ou illustrer quelque chose mais que vous êtes incapable de le faire, l'ordinateur peut vous aider à atteindre votre objectif. Il pourrait simplement observer le centre d'attention et prédire ce que vous aimeriez créer», dit Ruotsalo. Cependant, les chercheurs pensent que la technique peut être utilisée pour mieux comprendre la perception et les processus sous-jacents dans notre esprit.
« La technique ne reconnaît pas les pensées, mais répond plutôt aux associations que nous avons avec les catégories mentales. Ainsi, même si nous ne sommes pas en mesure de découvrir l'identité d'une« personne âgée »spécifique à laquelle un participant pensait, nous pouvons acquérir une compréhension de ce qu'ils associent à la vieillesse. Nous pensons donc que cela pourrait fournir une nouvelle façon de mieux comprendre les processus sociaux, cognitifs et émotionnels », déclare Michiel Spapé, chercheur principal.
Selon Spapé, cela est également intéressant d'un point de vue psychologique.
«L'idée qu'une personne se fait d'une personne âgée peut être très différente de celle d'une autre. Nous sommes actuellement en train de découvrir si notre technique pourrait révéler des associations inconscientes, par exemple en regardant si l'ordinateur rend toujours les personnes âgées comme, par exemple, des hommes souriants.
La source:
Référence du journal:
Kangassalo, L., et coll. (2020) Modélisation neuro-adaptative pour générer des images correspondant à des catégories perceptives. Rapports scientifiques. doi.org/10.1038/s41598-020-71287-1.