Ouvrir le menu principal

WatchGeneration

Recherche

NVIDIA utilise le Vision Pro pour le développement de robots humanoïdes

Félix Cattafesta

mardi 06 août 2024 à 08:00 • 9

Apple Vision

Vous voyez, Tim Cook ne mentait pas quand il disait que le Vision Pro était plébiscité en entreprise ! Voici un (rare) exemple avec NVIDIA, qui a récemment présenté ses avancées en termes de robotique : on peut y voir que des casques Apple sont utilisés pour le développement de machines humanoïdes.

Image WatchGeneration

NVIDIA explique fournir une suite de modèles d’IA et de plateformes pour aider les fabricants à former des robots de nouvelle génération. On y trouve des outils dédiés à la simulation et à l'apprentissage ou d’autres servant à traiter les charges de travail robotiques à plusieurs étapes. Les casques comme le Vision Pro peuvent être utilisés pour voir les données comme pour contrôler le matériel.

Le Vision Pro sert à enregistrer un petit nombre de démonstrations réelles, où un humain contrôle directement le robot. Ces séquences sont ensuite passées dans un logiciel de simulation avant de nourrir le service maison MimicGen NIM, qui carbure à l’IA générative. Celui-ci s’inspire des enregistrements pour générer un ensemble de données synthétiques, dans lesquels on retrouve les mêmes gestes dans différents environnements. Une vidéo permet d’en savoir un peu plus :

On peut y voir qu'il ne s'agit pas simplement de déplacer la caméra du robot en fonction de l'orientation du casque : les mouvements et les gestes des mains sont également capturés et utilisés grâce aux capteurs du Vision Pro. Il est précisé que le porteur du casque peut voir les actions du robot dans le casque pendant l'enregistrement par-dessus le monde réel. Des entreprises comme Boston Dynamics ou ByteDance Research ont rejoint le programme d’early-acess de NVIDIA pour essayer ces nouveaux outils.

Rejoignez le Club iGen

Soutenez le travail d'une rédaction indépendante.

Rejoignez la plus grande communauté Apple francophone !

S'abonner

Craquez pour ce bracelet bicolore magnétique pour Apple Watch

14/06/2025 à 14:50

• 0


Sortie de veille : une WWDC 2025 réussie ? Notre débrief d’iOS 26, Liquid Glass…

14/06/2025 à 12:50

• 11


Avec Tahoe, les applications macOS pourront s’afficher sur le Vision Pro

13/06/2025 à 17:30

• 17


watchOS 26 : découverte de la nouvelle interface de l'app Exercice

13/06/2025 à 14:30

• 4


Widgets spatiaux, personas améliorées… Les 5 grosses nouveautés de visionOS 26

12/06/2025 à 17:30

• 8


Bose lance des écouteurs QuietComfort Ultra améliorés

12/06/2025 à 16:10

• 5


L’app Canal+ fait son show : nouveau player, vidéo immersive sur Vision Pro…

12/06/2025 à 00:02

• 29


Promos : plus de 20 % de réductions sur l'Apple Watch Series 10 et 150 € de réduction sur l'iPhone 16 Plus

11/06/2025 à 15:20

• 1


vivo X Fold 5 : le premier smartphone Android à offrir une prise en charge native de l'Apple Watch et d'iCloud !

11/06/2025 à 14:22

• 28


Liquid Glass : si Steve Jobs était vivant...

11/06/2025 à 13:31

• 53


Snap va lancer des lunettes de réalité augmentée grand public en 2026

11/06/2025 à 09:34

• 4


Le cadran Toy Story disparait de watchOS 26

11/06/2025 à 07:43

• 21


Comment tester les futures nouveautés des AirPods et AirPods Pro

10/06/2025 à 21:50

• 15


Les AirPods Pro 3 apparaissent aussi dans iOS 26

10/06/2025 à 21:10

• 8


Le Finder change de face sur macOS Tahoe

10/06/2025 à 16:52

• 63


Le Vision Pro va accepter des manettes que vous ne pouvez pas acheter

10/06/2025 à 11:06

• 11