AI Agent mit AR-Oberfläche
Das Herzstück des Systems ist ein LLM-basierter AI Agent, der weit über einfache Objekterkennung hinausgeht. Er akzeptiert multimodale Eingaben, analysiert den Kontext, fragt externe Datenquellen ab und generiert Antworten als AR-Szenen beliebiger Komplexität.
5-Schritte-AI-Zyklus
Vom Sprachbefehl zur interaktiven AR-Szene in Millisekunden.
Eingabe
Sprach- oder Textfrage in jeder Sprache oder Kamera auf das Gerät gerichtet
Analyse
LLM analysiert die Anfrage mit Kontext: VPS-Position, Interaktionsverlauf, Sensordaten, ERP-Status
Agentenmodus
AI bestimmt autonom, welche externen Daten benötigt werden: Teilekatalog, ERP, technische Dokumente, Wissensdatenbank, Sensortelemetrie
ECS-Generierung
AI generiert die Antwort als ECS-Struktur — Entitäten mit Positions-, Geometrie-, Material-, Animations- und Annotationskomponenten
AR-Visualisierung
Die ECS-Struktur wird über WebSocket übertragen und als AR-Szene gerendert: 3D-Modelle, hervorgehobene Knoten, Annotationen, Animationen
Sprechen Sie wie mit einem Experten
Der AI Agent versteht Kontext, Sprache und räumliche Position — und antwortet mit interaktiven AR-Szenen, nicht mit Text.
«Zeig mir alle Teile, die bei Wartung-500 ausgetauscht werden müssen»
AI fragt den Wartungsplan ab, findet die Teileliste und generiert eine ECS-Szene, die jedes Teil an der Maschine mit Katalogannotationen hervorhebt.
«Was ist mit diesem Teil los?»
AI erkennt Deutsch, analysiert die Kamerarichtung über VPS, identifiziert die Komponente, fragt Sensortelemetrie ab und generiert einen diagnostischen AR-Bericht auf Deutsch.
«Vergleiche dieses Teil mit einer Alternative»
AI findet das Original und die Alternative im Katalog, generiert eine ECS-Szene mit zwei 3D-Modellen nebeneinander, Differenzannotationen und Preisvergleich.
AR-Antworten als Entity-Komponenten
Jede AI-Antwort ist eine Menge von Entitäten, die jeweils Komponenten haben, die festlegen, wie sie in der erweiterten Realität erscheinen und sich verhalten.
Timer
Text
Liste
Buttons
Navigation
Marker
Erkennung
Medien
3D-Objekt
Audio
Statische Anleitungen vs. dynamische AI-Generierung
- Manuell erstellte statische AR-Überlagerungen
- Feste Inhalte für jeden Geräteknoten
- Eine Sprache, kein Kontextbewusstsein
- Monate für Erstellung und Aktualisierung der Inhalte
- Kann unerwartete Fragen nicht beantworten
- AI generiert AR-Szenen dynamisch in Echtzeit
- Kontextbewusst: kennt Ihre Position, Gerätezustand, ERP-Daten
- Jede Sprache — Sprach-, Text- oder Kameraeingabe
- Neue Inhalte sofort generiert, kein Authoring nötig
- Beantwortet jede Frage mit einer interaktiven AR-Visualisierung
Den AI Agent in Aktion sehen
Vereinbaren Sie eine Demo, um zu erleben, wie der AI Agent interaktive AR-Antworten in Echtzeit generiert.
Demo anfordern