Le bras robotique de FRIDA tente d’amener l’art de l’IA de style DALL-E sur des toiles du monde réel • TechCrunch

On pourrait avancer un argument très raisonnable selon lequel FRIDA (Framework and Robotics Initiative for Developing Arts) est autant une expérience de pensée qu’un projet de recherche. Certes, cela se heurte à des questions similaires sur l’art et la créativité que des projets d’IA comme DALL-E et ChatGPT – bien que la question soit sans doute encore plus dans votre visage quand c’est un bras de robot qui peint sur une toile du monde réel.

Je reconnais que tout cela est extrêmement subjectif, mais à ce stade du processus, je dirais que le projet de l’Institut de robotique de l’Université Carnegie Mellon a du rattrapage à faire avec les systèmes d’IA basés sur des logiciels. Malgré tout, il est fascinant de regarder le projet, qui tire (évidemment) son nom de la célèbre portraitiste mexicaine Frida Kahlo.

Crédits image : CMU

“FRIDA est un projet explorant l’intersection de la créativité humaine et robotique”, déclare Jim McCann, professeur à la CMU. “FRIDA utilise le type de modèles d’IA qui ont été développés pour faire des choses comme des images de légende et comprendre le contenu de la scène et l’appliquer à ce problème de génération artistique.”

Le système nécessite actuellement certaines entrées, y compris des descriptions textuelles et des images existantes, bien que dans un monde si lié aux interprétations littérales, il puisse fonctionner un peu plus abstraitement. Dans un cas, l’équipe a joué le robot le banger de tous les temps qui est la “Dancing Queen” d’ABBA.

Bien qu’ils tentent également de réduire les questions d’automatisation des tâches au passage. D’une part, les humains sont nécessaires non seulement pour les intrants, mais aussi pour le mélange de peinture réel (bien que, pour être clair, il est réaliste de supposer que c’est assez automatisable). L’équipe suggère que c’est idéal en tant que collaborateur.

Crédits image : CMU

L’élément le plus intéressant est peut-être l’imprécision du système. Le but d’une telle robotique est généralement d’obtenir des choses aussi précises que possible. Ici, cependant, le système est autorisé à faire des erreurs et ajuste le reste de la peinture en conséquence, en utilisant une caméra aérienne pour surveiller sa propre progression. La vitesse n’est pas non plus une priorité. Chaque peinture prend des heures à compléter.

Les œuvres de FRIDA sont actuellement visibles sur un compte Twitter géré par la CMU.

Laisser un commentaire