Agility révolutionne la communication avec ses robots humanoïdes grâce à des modèles linguistiques innovants !

Les robots génératifs et les modèles de langage

Les robots génératifs et les modèles de langage sont en train de révolutionner la façon dont les robots communiquent, apprennent, regardent et sont programmés. J’ai discuté de ces technologies avec des experts en robotique tout au long de l’année écoulée, et il est de plus en plus évident que ces technologies sont prêtes à révolutionner le domaine de la robotique.

Agility et son robot bipède, Digit

Agility, une start-up basée dans l’Oregon et bien financée, explore les meilleures méthodes pour exploiter ces plateformes d’intelligence artificielle. La société utilise son robot bipède, Digit, pour expérimenter ces technologies depuis un certain temps.

Aujourd’hui, la société présente une vidéo courte de son travail, partagée sur ses réseaux sociaux.

Démonstration de l’intégration de l’intelligence artificielle dans Digit

La démonstration consiste à donner à Digit des commandes en langage naturel de complexité variable pour voir s’il peut les exécuter. Dans l’exemple vidéo, Digit est chargé de prendre une boîte de la couleur du « sabre laser de Dark Vador » et de la déplacer vers la tour la plus haute. Le processus est lent et délibéré, comme on peut s’y attendre d’une démonstration à un stade précoce. Cependant, le robot exécute la tâche telle qu’elle est décrite.

Cette démonstration interactive montre comment les modèles de langage peuvent rendre nos robots plus polyvalents et plus rapides à déployer. Elle permet aux personnes de parler à Digit en langage naturel et de lui demander d’effectuer des tâches, offrant un aperçu du futur.

Les avantages de la communication en langage naturel

La communication en langage naturel est l’une des principales applications potentielles de cette technologie, ainsi que la possibilité de programmer des systèmes grâce à des technologies à faible ou sans code.

Le Dr. Gill Pratt, directeur de l’Institut de recherche Toyota, a décrit lors d’un panel de discussion comment son équipe utilise l’IA générative pour accélérer l’apprentissage des robots. Ils ont réussi à enseigner 60 compétences différentes à un robot en utilisant des techniques d’IA générative modernes qui permettent une démonstration humaine de la position et de la force.

De même, Daniela Rus du MIT CSAIL m’a récemment expliqué que l’IA générative peut être très puissante pour résoudre des problèmes de planification de mouvement. Les solutions obtenues sont plus rapides et plus fluides, et ressemblent davantage à des mouvements humains que les solutions classiques basées sur des modèles prédictifs.

Les applications potentielles de la technologie pour Digit

Les applications potentielles de cette technologie sont vastes et passionnantes. Digit, en tant que système robotique avancé disponible commercialement et en cours de test dans les centres de traitement d’Amazon et d’autres lieux du monde réel, semble être un candidat idéal pour bénéficier de ces avancées technologiques. Si les robots doivent travailler aux côtés des humains, ils devront apprendre à les écouter.