Après son grand succès avec OpenAI 5 en jouant à Dota 2, OpenAI vient de présenter un autre projet encore plus ambitieux. L’entreprise développe en ce moment un système robotique capable de manipuler des objets avec une dextérité humaine. La technique se base sur un algorithme qui apprend à diriger les mains d’une machine à se saisir d’objet et à le manipuler avec plus de précision. Pour le moment, le système a été testé dans un environnement numérique. Les chercheurs ont utilisé le moteur MuJoCo pour la simulation de l’environnement physique et Unity pour la vision des images.
L’entrainement du système a été fait à partir de 384 machines disposant de 16 cœurs de processeurs chacune. Pour entrainer le système, l’équipe s’est appuyée sur une main robotique à 5 doigts, la Shadow Dexterous Hand. La rotation et l’orientation des objets ont été effectuées par deux ensembles de caméras de capture de mouvement et caméras RVB. L’expérience a utilisé les capacités de détection conjointe et non ses capteurs tactiles. Au cours du premier test, le système robotique a été entrainé pour manipuler un bloc étiqueté avec des lettres de l’alphabet. Pour le second, il a appris à déplacer un prisme octogonal.
