Les révélations exclusives sur la robotique avec Dhruv Batra de Meta – Vous ne croirez pas ce qu’il a à dire !

Interview avec Dhruv Batra sur le rôle de l’IA générative dans la robotique

Pendant les prochaines semaines, la newsletter Actuator de Toukiela consacrée à la robotique présentera des entretiens avec certains des meilleurs experts en robotique. Inscrivez-vous ici pour recevoir les prochaines mises à jour.

Partie 1 : Matthew Johnson-Roberson de CMU

Partie 2 : Max Bajracharya et Russ Tedrake de Toyota Research Institute

Cette fois-ci, nous avons Dhruv Batra, directeur de recherche à FAIR (The Fundamental AI Research) chez Meta. La société mère de Facebook décrit FAIR comme suit :

L’équipe de recherche fondamentale en intelligence artificielle (FAIR) chez Meta cherche à approfondir notre compréhension fondamentale dans des domaines nouveaux et existants, couvrant l’ensemble des sujets liés à l’IA, dans le but de faire progresser l’état de l’art de l’IA grâce à la recherche ouverte, pour le bénéfice de tous.

Batra est également professeur associé à l’Institut de technologie de Géorgie.

Quel(s) rôle(s) jouera l’IA générative dans l’avenir de la robotique ?

Je vois l’IA générative jouer deux rôles distincts dans la recherche en IA incarnée et en robotique :

• Générateurs de données/expériences : générer des images 2D, des vidéos, des scènes 3D ou des expériences simulées en 4D (3D + temps) (notamment des expériences conditionnées par l’action/le langage) pour entraîner des robots, car l’expérience du monde réel est si rare en robotique. En gros, il s’agit de « simulateurs appris ». Et je pense que la recherche en robotique ne peut tout simplement pas s’étendre sans entraînement et test en simulation.
• Architectures pour l’apprentissage auto-supervisé : générer des observations sensorielles que l’agent observera dans le futur, pour les comparer aux observations réelles et les utiliser comme signal sans annotation pour l’apprentissage. Voir l’article de Yann sur AMI pour plus de détails.

Quels sont vos avis sur la forme humanoïde ?

Je suis optimiste à ce sujet. Fondamentalement, les environnements humains sont conçus pour la forme humanoïde. Si nous voulons vraiment des robots polyvalents opérant dans des environnements conçus pour les humains, la forme devra être au moins quelque peu humanoïde (le robot aura probablement plus de capteurs que les humains et peut-être plus d’appendices également).

À quelle échéance pouvons-nous espérer des robots polyvalents véritablement opérationnels ?

Trente ans. Donc en dehors de la fenêtre où toute prédiction significative est possible. En fait, je pense que nous devrions être profondément sceptiques et méfiants envers les personnes faisant des prédictions du type « l’IA générale est imminente ».

Est-ce que les robots domestiques (autres que les aspirateurs) vont se développer dans la prochaine décennie ?

Non, je ne pense pas que la technologie de base soit prête.

Quelle histoire/tendance importante dans le domaine de la robotique ne bénéficie pas d’une couverture suffisante ?

Le fait que nous pouvons désormais tester des robots de navigation dans de vrais foyers et que cela fonctionne réellement ! Remarquez que, contrairement aux voitures autonomes, ces robots de navigation à domicile n’ont pas le luxe de construire des cartes précises sur des millions de kilomètres de conduite. Nous emmenons un robot dans une nouvelle maison et lui demandons de trouver des objets.