Explosion de l’IA générative chez Nvidia : une compatibilité inédite avec les plateformes robotiques !

L’intelligence artificielle générative dans le monde de la robotique

Il n’est pas surprenant d’apprendre que l’intelligence artificielle générative est un sujet brûlant dans le monde de la robotique. De nombreuses idées circulent sur les meilleures façons d’adopter ces technologies émergentes, des commandes en langage naturel à la conception. J’ai posé la question de l’intelligence artificielle générative à Deepu Talla, vice-président et directeur général de l’informatique embarquée et de l’informatique périphérique chez Nvidia, lors d’une récente visite au siège de l’entreprise dans la baie de San Francisco.

Les améliorations de la productivité grâce à l’IA générative

« Je pense que cela se voit dans les résultats. Vous pouvez déjà constater l’amélioration de la productivité », m’a confié le directeur. « Elle peut composer un e-mail pour moi. Ce n’est pas parfait, mais je n’ai pas à partir de zéro. Elle me donne 70%. On peut déjà voir des améliorations évidentes qui sont nettement meilleures que ce qu’on avait avant. Résumer quelque chose n’est pas parfait. Je ne vais pas la laisser lire et résumer pour moi. Donc, on peut déjà voir des signes d’amélioration de la productivité. »

L’annonce de Nvidia sur l’IA générative

Il s’avère que Nvidia n’était qu’à quelques semaines de l’annonce de ses nouvelles concernant ce sujet. L’annonce de ROSCon s’accompagne de plusieurs autres nouvelles liées à ses différentes offres en robotique, notamment la disponibilité générale des plateformes Nvidia Isaac ROS 2.0 et Nvidia Isaac Sim 2023.

L’adoption de l’IA générative par les roboticiens

Ces systèmes adoptent l’intelligence artificielle générative, ce qui devrait contribuer à accélérer son adoption parmi les roboticiens. En effet, selon Nvidia, quelque 1,2 million de développeurs ont interfacé avec les plates-formes Nvidia AI et Jetson. Parmi eux, on retrouve des clients de renom tels que AWS, Cisco et John Deere.

Le laboratoire Jetson Generative AI

L’un des aspects les plus intéressants ici est le Jetson Generative AI Lab, qui donne aux développeurs un accès à des modèles de langage volumineux en open source. La société explique :

Le Jetson Generative AI Lab de NVIDIA offre aux développeurs un accès à des outils et des tutoriels optimisés pour le déploiement de LLM (modèles de langage volumineux) en open source, des modèles de diffusion pour générer des images étonnantes de manière interactive, des modèles de langage vision (VLM) et des transformateurs de vision (ViTs) qui combinent l’IA visuelle et le traitement du langage naturel pour une compréhension complète de la scène.

L’utilisation des modèles pour une meilleure adaptation

L’arrivée de ce type de modèles peut contribuer à aider les systèmes à déterminer une action à entreprendre dans des circonstances pour lesquelles ils n’ont pas été entraînés auparavant (la simulation seule a ses limites). En effet, même si des endroits comme les entrepôts et les usines sont plus structurés que, par exemple, une autoroute, il reste d’innombrables variables à prendre en compte. L’idée est de pouvoir s’adapter en temps réel et d’offrir une interface en langage naturel plus conviviale pour les systèmes.

L’accélération des déploiements d’IA grâce à l’IA générative

« L’IA générative accélérera considérablement le déploiement de l’IA en périphérie avec une meilleure généralisation, une facilité d’utilisation et une précision accrues par rapport à ce qui était précédemment possible », a déclaré Talla dans un communiqué lié aux dernières nouvelles. « Cette expansion logicielle la plus importante de nos frameworks Metropolis et Isaac sur Jetson, associée à la puissance des modèles de transformation et de l’IA générative, répond à ce besoin. »

Améliorations de la perception et de la simulation

Les dernières versions des plates-formes apportent également des améliorations en matière de perception et de simulation.