Apple Vision Pro appliqué au domaine médical

Chez IMAIOS, nous sommes particulièrement passionnés par l’innovation et l’expérimentation. Donc évidemment lorsque nous avons entendu parler du lancement de l’Apple Vision Pro, on s’est dit qu’il fallait absolument le tester et explorer les possibilités qu’il ouvre dans le domaine médical.

Apple Vision Pro, c’est quoi ?

C’est un casque de réalité mixte (mixed reality). Apple le désigne comme le premier ordinateur spatial. La “fonction qui tue” est vraiment le contrôle oculaire qui est réellement révolutionnaire. Hormis cela, la qualité d'image est tout simplement époustouflante et le confort d'utilisation inégalé par rapport aux casques de précédente génération. C’est le point fort de l’écran micro-oled. Malgré tout, bien qu’il ne pèse que 600 grammes, le poids du casque finit par peser sur le visage.

• L’écran micro-Oled qui supprime l’effet de grille est une véritable révolution
• Poids mal réparti et qui finit par peser sur le visage

Une révolution dans le domaine de la médecine ? 

Le dispositif médical Vision Pro pourrait être le plus avancé sur le marché. Il est clair que les experts du domaine trouveront dans cet appareil un outil précieux au quotidien ou pour la formation mais aussi dans la radiologie interventionnelle.

En mars 2024, une étape historique a été franchie au Royaume-Uni lorsque, pour la première fois, une équipe de chirurgiens a utilisé le casque Vision Pro d’Apple lors d’une intervention chirurgicale, ce qui représente une avancée majeure dans l’intégration de la réalité mixte dans le domaine médical. Le chirurgien a été assisté par une infirmière de bloc opératoire à l'hôpital privé Cromwell de Londres, qui a utilisé le Vision Pro pour préparer l'intervention, suivre la procédure et choisir les outils appropriés. Cet outil a permis à l'équipe chirurgicale de se déplacer dans l'opération en réalité augmentée, ce qui a permis d'améliorer la visibilité et la précision.

Faciliter l’apprentissage des étudiants

La qualité hautement immersive des technologies de réalité virtuelle, réalité augmentée ou encore réalité étendue permet aux étudiants de participer activement à des simulations réalistes, à des scénarios médicaux proches de la réalité et à des modèles anatomiques interactifs.
La mise en œuvre de l’Apple Vision Pro a le potentiel d'améliorer l'enseignement et la formation médicale en offrant une expérience d'apprentissage plus pratique et plus immersive. 
La réalité virtuelle peut offrir une formation clinique rentable, normalisée et reproductible, notamment au travers de :  

• Simulations interactives : La formation pratique est souvent difficile à fournir, la réalité virtuelle peut pallier cette difficulté en se basant sur la simulation. La formation basée sur la simulation implique de reproduire des scénarios réels, puis de fournir un retour d'information sur les performances de l'étudiant. Il a été démontré qu'elle était supérieure à la formation clinique traditionnelle et qu'elle donnait des résultats durables¹. 
• Accès à l'information en temps réel : Les professionnels de la santé en formation pourraient accéder à des données cliniques pertinentes, à des lignes directrices de pratique clinique et à des études de cas tout en pratiquant des procédures ou en interagissant avec des patients. Ils pourraient ainsi prendre des décisions éclairées et actualisées en temps réel.
• Collaboration à distance : Le masque pourrait faciliter la collaboration à distance entre les étudiants, les professeurs et les professionnels de la santé pendant les sessions de formation. Cela serait particulièrement utile pour l'apprentissage à distance et la consultation sur des cas complexes entre collègues éloignés géographiquement.
   

Quel apport pour la radiologie ?

Ces technologies offrent indéniablement aux radiologues des outils avancés pour analyser des images médicales complexes en trois dimensions (3D), ce qui permet de mieux comprendre l'anatomie humaine et de faciliter le diagnostic radiologique.

Diagnostic plus précis qui améliore la prise en charge des patients

La visualisation radiologique est révolutionnée grâce à l'utilisation de techniques avancées de vision par ordinateur pour l'imagerie et la reconstruction en 3D. Dans ce domaine, les évolutions à venir incluent l'élaboration d'algorithmes de reconstruction 3D en temps réel, des techniques de rendu volumétrique et d'outils de visualisation de la réalité virtuelle, offrant ainsi une exploration immersive et interactive des données d'imagerie médicale. Couplé à l’amélioration de la finesse des images apportée par les équipements, le diagnostic sera facilité et gagnera en précision.

La visualisation de l'imagerie médicale tridimensionnelle dans un espace immersif crée des opportunités intéressantes pour améliorer les soins aux patients. 
Les radiologues ont la capacité de voir les images médicales avec une précision et une clarté inégalées, ce qui leur permet de poser des diagnostics et de formuler des plans de traitement plus précis et adaptés. En utilisant des outils de visualisation de pointe, les radiologues ont la possibilité d'améliorer les résultats des patients et de garantir une meilleure qualité de soins. 

Une première mondiale : réalisation d’une vertébroplastie percutanée guidée par scanner avec Apple Vision Pro

Nous avons testé l’APV en conditions réelles. La vertébroplastie percutanée a été réalisée par le Dr Denis Hoa sous la supervision du Dr Antoine Micheau.

Nous en retirons de nombreux points positifs :

• L’utilisation de la reconnaissance des gestes et le suivi des yeux facilite la visualisation des examens d'imagerie pré-procéduraux pour préparer l’intervention ; 
• La possibilité de positionner l’écran à l’endroit le plus pratique pour l’opérateur, par exemple superposer les images directement sur le corps du patient ;
• L’amélioration de la visualisation grâce à la superposition d'images en temps réel à proximité de l'opérateur ;
• Gagner du temps en réduisant l’attention induite par le déplacement de l’attention d’une zone à une autre ;
• Limiter de possibles contaminations grâce à la possibilité de zoomer, déplacer et faire pivoter les écrans sans contact physique.
   

En bref, l'Apple Vision Pro a la capacité de changer la manière dont les professionnels de la santé sont formés en leur offrant des ressources pédagogiques avancées, des simulations pratiques et des outils de collaboration en temps réel. Il pourrait en résulter une formation médicale plus efficace et des professionnels mieux préparés à faire face aux défis de la pratique clinique.

Les apps qui vont être développées par IMAIOS

Actuellement nous sommes en phase de recherche d’outils et dans le même temps, nous essayons de déterminer la faisabilité. Une première idée d'intégration d'application serait la reconstruction 3D en natif à partir d'IMAIOS DICOM Viewer iOS.
Nous sommes aussi convaincus que la formation à distance peut bénéficier de cette technologie, ainsi des formations durant lesquelles un geste chirurgical ou de radiologie interventionnelle serait détaillé et explicité en direct pourraient voir le jour. C’est donc également un axe de développement que nous allons explorer.