Ouvrir le menu principal

WatchGeneration

Recherche

NVIDIA utilise le Vision Pro pour le développement de robots humanoïdes

Félix Cattafesta

mardi 06 août 2024 à 08:00 • 9

Apple Vision

Vous voyez, Tim Cook ne mentait pas quand il disait que le Vision Pro était plébiscité en entreprise ! Voici un (rare) exemple avec NVIDIA, qui a récemment présenté ses avancées en termes de robotique : on peut y voir que des casques Apple sont utilisés pour le développement de machines humanoïdes.

Image WatchGeneration

NVIDIA explique fournir une suite de modèles d’IA et de plateformes pour aider les fabricants à former des robots de nouvelle génération. On y trouve des outils dédiés à la simulation et à l'apprentissage ou d’autres servant à traiter les charges de travail robotiques à plusieurs étapes. Les casques comme le Vision Pro peuvent être utilisés pour voir les données comme pour contrôler le matériel.

Le Vision Pro sert à enregistrer un petit nombre de démonstrations réelles, où un humain contrôle directement le robot. Ces séquences sont ensuite passées dans un logiciel de simulation avant de nourrir le service maison MimicGen NIM, qui carbure à l’IA générative. Celui-ci s’inspire des enregistrements pour générer un ensemble de données synthétiques, dans lesquels on retrouve les mêmes gestes dans différents environnements. Une vidéo permet d’en savoir un peu plus :

On peut y voir qu'il ne s'agit pas simplement de déplacer la caméra du robot en fonction de l'orientation du casque : les mouvements et les gestes des mains sont également capturés et utilisés grâce aux capteurs du Vision Pro. Il est précisé que le porteur du casque peut voir les actions du robot dans le casque pendant l'enregistrement par-dessus le monde réel. Des entreprises comme Boston Dynamics ou ByteDance Research ont rejoint le programme d’early-acess de NVIDIA pour essayer ces nouveaux outils.

Rejoignez le Club iGen

Soutenez le travail d'une rédaction indépendante.

Rejoignez la plus grande communauté Apple francophone !

S'abonner

Le pin’s des 10 ans de l’Apple Watch à peine sorti, déjà revendu en quantité sur eBay

25/04/2025 à 20:00

• 29


Promo : l'Apple Watch Ultra 2 en titane noir à 789 € (-110 €)

25/04/2025 à 14:26

• 0


Microsoft a conçu une publicité par IA et personne n’a rien vu

25/04/2025 à 13:45

• 22


Bowers & Wilkins revoit son excellent casque Px7

25/04/2025 à 13:00

• 8


Apple Watch : retour sur 10 ans de succès et d'échecs

24/04/2025 à 20:00

• 20


Vous pouvez récupérer le pin’s créé pour les dix ans de l’Apple Watch en Apple Store 🆕

24/04/2025 à 13:06

• 68


L’AI Pin revient d’entre les morts avec le projet OpenPin

23/04/2025 à 21:30

• 7


Meta améliore l’intelligence artificielle intégrée aux lunettes Ray-Ban pour les utilisateurs européens

23/04/2025 à 17:30

• 16


Ping Pong Club : enfin une app de tennis de table pour le Vision Pro

22/04/2025 à 13:30

• 8


UNA : une montre sportive connectée plus modulaire et réparable

22/04/2025 à 12:30

• 8


Un trophée Apple Watch le 22 avril pour le Jour de la Terre

22/04/2025 à 06:43

• 9


Une troisième bêta pour watchOS 11.5 et visionOS 2.5

21/04/2025 à 21:07

• 0


La dernière publicité d’Apple évoque une fonction d’Apple Intelligence qui est bien réelle et utile

21/04/2025 à 18:45

• 28


Promo : l’Apple Watch Series 10 cellulaire à 450 € au lieu de 569 sur Amazon France

21/04/2025 à 13:46

• 2


Promo : les AirPods Pro 2 à 220 € (-59 €)

20/04/2025 à 08:30

• 18


Promo : l’Apple Watch Series 9 45 mm à seulement 299 €

18/04/2025 à 11:25

• 8