Un système de réalité augmentée pour aider les cosmonautes commence ses tests au TsPK
Ivan Vagner assemblant un dispositif les lunettes de réalité augmentée sur les yeux.
Le Centre d'entraînement des cosmonautes (TsPK) a commencé à tester un système de réalité augmentée, qui pourra à l'avenir être utilisé par les cosmonautes lorsqu'ils travaillent dans l'espace : l'intelligence artificielle reconnaît le détail, les informations nécessaires à ce sujet sont affichées sur des lunettes spéciales pour le cosmonaute et un algorithme pour un travail ultérieur est indiqué. Le projet scientifique a été nommé "Technologie intelligente de contrôle des opérations manuelles par image vidéo".
Dans le cadre de la présentation de la technologie développée conjointement par l'Advanced Research Foundation, le FSUE VNIIA et la société Motiv, utilisant des lunettes de réalité augmentée, le cosmonaute de Roscosmos Ivan Vagner a assemblé l'instrument scientifique Bubble Dosimeter.
Tout en travaillant avec les lunettes elles-mêmes, ainsi que dans l'application, le moniteur de démonstration affichait du texte, des conseils graphiques et des cadres de reconnaissance, dans lesquels le système intelligent déterminait les objets.
Le cosmonaute a suivi la séquence d'étapes requise et a réussi à assembler l'instrument. Sur la base des résultats des tests, il a, avec les spécialistes du TsPK, présenté des propositions d'amélioration et de développement de cette technologie en relation avec les vols spatiaux.
Le TsPK est devenu un site pilote pour tester ce projet.
La solution innovante proposée combine trois technologies, à savoir : la vision artificielle, la réalité augmentée et la conception numérique. L'utilisation de réseaux de neurones pour résoudre des problèmes de vision artificielle a permis de créer un logiciel capable de reconnaître des objets, des pièces et des unités d'assemblage en temps réel, ainsi que de classer les actions d'un cosmonaute. La technologie développée est davantage axée sur la performance des opérations d'assemblage et de picking.
L'événement a été suivi par le chef du TsPK Maxime Kharlamov, la direction et les chercheurs du Centre.
Source: TsPK/Roscosmos; Crédits photographiques: Andreï Shelepine/TsPK
Ivan Wagner en discussion avec les ingénieurs.
Maxime Kharlamov examine le matériel.
Maxime Kharlamov essaie les lunettes de réalité augmentée.