Um Montagearbeitsplätze effizienter zu gestalten, hat das Fraunhofer IGD Augmented Reality (AR) und Maschinelles Lernen eng verknüpft. Das Ergebnis ist ein AR-gestütztes System für einen nutzergeführten Zusammenbau komplexer Produktkonfigurationen. Der zuständige Werker wird entlang der CAD-Spezifikation einer digitalen Produktkonfiguration durch den realen Prozess des Zusammenbaus geführt. Neben einer Überlagerung der Konturen eines CAD-Modells erkennt das System auch die richtige Reihenfolge des Zusammenbaus und gibt dem Werker eine direkte visuelle Rückmeldung über die Korrektheit des Zusammenbauschrittes sowie der richtigen Position und Orientierung eines Bauteils im Produktaufbau. Somit wird nicht nur der Assemblierungsprozess unterstützt, sondern auch zugleich eine Verifikation gegenüber der CAD-Spezifikation ermöglicht.
Zusätzlich kann der Werker durch einen aus der Ferne zugeschalteten Experten direkt in einer virtuellen 1-zu-1 Präsenz vor Ort unterstützt werden. Über neuartige volumetrische Rekonstruktionsverfahren wird die Vor-Ort Situation aufgenommen und dem Remote-Experten überspielt. Umgekehrt kann ein Experte seine Handlungsunterstützungen in direkter virtueller Präsenz dem Werker erklären und ihm entweder über direkte Handlungsanweisungen oder virtuelle Annotationen am Objekt Hilfestellungen geben. Das System ist skalierbar und unterstützt den Werker sowohl über mobile als auch kopfgebundene xR-Ausgabeeinheiten.
Mit dem AR-basierten Montagearbeitsplatz werden komplexe Produktaufbauten effizient unterstützt und gleichzeitig gegenüber der CAD-Spezifikation verifiziert. Somit ersetzt das System die zurzeit meist noch in physikalischer Form vorliegenden Zusammenbauanweisungen, welche eine hohe Transferleistung der Werker von 2D-Bauanweisungen in die 3D-Welt erfordern. Durch eine neuartige Form der Fernunterstützung können auch hochkomplexe Zusammenbauten schnell und kostengünstig erfolgen. Eine zusätzliche Abnahme eines Zusammenbaus erfolgt dann vollautomatisch und wird entsprechend der vorliegenden CAD-Spezifikation sofort verifiziert.