Medizinische Augmented Reality kombiniert sowohl reale als auch virtuelle dreidimensionale Bilder, um medizinische Verfahren oder Schulungen zu unterstützen. Am häufigsten werden Augmented-Reality-Technologien verwendet, um Ärzten Bilder des Inneren des Körpers eines Patienten für die Verwendung in der Chirurgie bereitzustellen. Die gleichen oder ähnliche Technologien ermöglichen es Medizinstudenten, Verfahren an Puppen oder Leichen zu üben. Ein anderer Typ hilft den Patienten selbst zu visualisieren, was in ihrem Körper passiert.
Minimalinvasive Operationstechniken ermöglichen es Ärzten, Operationen durchzuführen, ohne große Einschnitte zu machen. Medizinische Augmented Reality ist ein wesentliches Instrument, um dies zu ermöglichen. Häufig werden die Ergebnisse der Magnetresonanztomographie (MRT), Ultraschall oder andere dreidimensionale Aufzeichnungen eines Patienten mit Echtzeitbildern der Operationen des Chirurgen kombiniert. Die kombinierten Bilder können über ein Head Mounted Display (HMD) angezeigt werden, das der Chirurg trägt, um das natürliche Sehvermögen nachzuahmen.
Medizinstudenten oder chirurgische Praktikanten können medizinische Augmented Reality nutzen, um Operationstechniken zu üben. Die Technologie dafür ist ähnlich wie bei der minimal-invasiven Chirurgie. Anstelle einer tatsächlichen Patientenakte kann der Schüler jedoch üben, indem er eine Puppe mit generischen Bildern des Inneren des Körpers einer Person verwendet. Der Student konnte dann die virtuellen Bilder manipulieren, um eine hochgenaue Simulation der Durchführung tatsächlicher Operationen bereitzustellen. Für eine noch größere Ähnlichkeit kann das gleiche auch mit einer Leiche anstelle einer Puppe durchgeführt werden.
Da medizinische Augmented Reality ein so detailliertes und lebendiges Bild des Körperinneren liefern kann, kann es auch zur Aufklärung von Patienten verwendet werden. Eine Person könnte zum Beispiel vor einem Bildschirm stehen, der Bilder der Muskeln, des Skeletts oder anderer betroffener Systeme im Körper liefert. Dieses Bild kann sich bewegen, wenn sich die Person bewegt oder als Reaktion auf die Manipulation des Arztes. Der Arzt kann diese Bilder verwenden, um Patienten zu helfen, zu verstehen, was in ihrem Körper schief läuft und was getan werden muss, um die Probleme zu beheben. Diese Technologie erfüllt beispielsweise eine ähnliche Funktion wie ein maßstabsgetreues Modell eines Kniegelenks, jedoch mit höherer Interaktivität.
Der Bereich der medizinischen Augmented Reality wächst weiter. Andere Anwendungen dieser Technologien wurden vorgeschlagen, wurden jedoch bis 2011 nicht implementiert. Beispielsweise könnte es möglich sein, eine HMD-Software zu erstellen, die es Ärzten ermöglicht, die gesamte Krankengeschichte eines Patienten auf einen Blick zu sehen, indem Bilder früherer Bilder übereinander gelegt werden Verletzungen oder Krankheiten am Körper des Patienten.