Originalbeitrag von Michael Fleischman, CTO und Mitgründer von OpenSpace

Das wichtigste Gerät auf Ihrer Baustelle haben Sie bereits in der Tasche

Bei Reality Capture geht es darum, zu sehen, was auf der Baustelle passiert. Visual Intelligence geht einen Schritt weiter: Bilder von der Baustelle werden mit Zeit und Ort verknüpft und dadurch zu Informationen, die Teams verstehen und direkt für ihre Arbeit nutzen können.

KI-Autolokalisierung ist eine der grundlegenden Technologien, die den Schritt von Reality Capture zu Visual Intelligence möglich machen. Sie ermöglicht eine Echtzeit-Positionierung innerhalb von Gebäuden direkt über das Smartphone, ganz ohne Beacons oder zusätzliche Hardware. Die zum Patent angemeldete Funktion basiert auf unserer OpenSpace Spatial AI Engine und kommt in OpenSpace Field zum Einsatz, unserem bildbasierten System für die Arbeit auf der Baustelle.

Bauteams erfassen bereits große Mengen an visuellem Kontext mit 360°-Begehungen, Smartphone-Fotos und Drohnenaufnahmen. Unsere Spatial AI Engine ordnet diese Bilder nach Zeit und Ort und erkennt, was darauf zu sehen ist. So finden Teams schnell die Informationen, die sie benötigen, und können direkt damit in OpenSpace und in den bereits genutzten Systemen, unter anderem durch umfassende Integrationen mit Procore und Autodesk Construction Cloud (ACC), weiterarbeiten.

Auch Drohnenflüge liefern Daten für dieselbe Engine. Sobald die Rohbilder zusammengefügt und geografisch verortet wurden, stehen Luftaufnahmen gemeinsam mit den Aufnahmen vom Boden in OpenSpace zur Verfügung. Mehr dazu erfahren Sie in unserem englischsprachigen Blogartikel zur Verarbeitung von Drohnenbildern im Bau.

Diese Form von Spatial AI ordnet jedes Bild der exakten Position im Grundriss zu. So wird aus einer Vielzahl einzelner Bilder eine durchsuchbare visuelle Dokumentation statt eines Ordners voller Dateien. Mehr dazu erfahren Sie in unserem englischsprachigen Blogartikel über Spatial AI im Bau.

Und all das funktioniert mit dem Gerät, das Sie ohnehin immer dabeihaben: Ihrem Smartphone.

OpenSpace Field macht das Smartphone zur zentralen Anlaufstelle für Workflows auf der Baustelle – schnell, einfach und auf Basis dessen, was tatsächlich vor Ort passiert. In Kombination mit der KI-Autolokalisierung erhält das gesamte Team eine Echtzeit-Positionierung innerhalb von Gebäuden, die mit jeder neuen Aufnahme genauer wird.

Wie funktioniert KI-Autolokalisierung?

KI-Autolokalisierung bestimmt die Position eines Smartphones innerhalb von Gebäuden, indem Live-Sensordaten mit einer digitalen Fingerprint-Karte abgeglichen werden, die aus den eigenen 360°-Aufnahmen des Projekts entsteht. Dafür sind weder Beacons noch fest installierte Sensoren oder separate Vermessungen der Baustelle erforderlich. Die Begehungen, die das Team ohnehin durchführt, erstellen und aktualisieren die Karte automatisch. Die Genauigkeit hängt damit davon ab, wie regelmäßig neue Aufnahmen erstellt werden und nicht von zusätzlicher Hardware im Gebäude.

GPS endet an der Eingangstür. Satellitensignale funktionieren innerhalb von Gebäuden nur eingeschränkt und Beacon-basierte „Indoor-GPS“-Systeme passen kaum zur dynamischen Realität einer Baustelle. Die KI-Autolokalisierung geht deshalb einen anderen Weg:

  1. Aufnahmen erstellen eine Sensorkarte: Ihre regulären 360°-Begehungen erzeugen ein laufend aktualisiertes Modell der Baustelle und einen kompakten digitalen Fingerabdruck, der Sensordaten mit bestimmten Positionen im Grundriss verknüpft.
  2. Das Smartphone übermittelt Live-Signale: Während Sie sich bewegen, werden die Sensordaten Ihres Smartphones erfasst – auch wenn Sie gerade keine 360°-Aufnahme durchführen.

  3. Das System gleicht die digitalen Fingerabdrücke ab: Die Messwerte des Smartphones werden mit der aktuellen Sensorkarte verglichen, um Ihre Position zu bestimmen und die Genauigkeit in Echtzeit zu aktualisieren.

  4. Das System entwickelt sich mit der Baustelle weiter: Jede neue Aufnahme aktualisiert das Modell und die Karte. So bleibt die Positionierung auch dann aktuell, wenn sich die Bedingungen auf der Baustelle verändern.

Das Ergebnis ist eine zuverlässige Positionierung innerhalb von Gebäuden, die sich an die Entwicklung der Baustelle anpasst.

Mit KI-Autolokalisierung werden alltägliche Aufgaben schneller und einfacher. Vor-Ort-Notizen, Beobachtungen und Bilder werden automatisch der richtigen Stelle im Grundriss zugeordnet. Das reduziert unnötige Abstimmungen und Missverständnisse. Auf komplexen Baustellen hilft eine Live-Anzeige der eigenen Position dabei, direkt den richtigen Raum zu finden.

Und mit KI-Sprachnotizen können Sie einen Mangel oder offenen Punkt einfach einsprechen. Unsere KI erstellt daraus die Vor-Ort-Notiz und ergänzt unter anderem die zuständige Person, das Fälligkeitsdatum und weitere Details. So können Sie den Punkt direkt erfassen, bearbeiten und abschließen.

Warum wird KI-Autolokalisierung mit der Zeit genauer?

Weil das System aus der Arbeit lernt, die das Team ohnehin bereits erledigt. Jede 360°-Begehung aktualisiert die Sensorkarte. Dadurch verbessert sich die Positionierung, ohne dass jemand eine separate Kalibrierung durchführen oder zusätzliche Hardware installieren muss.

In der Praxis bedeutet das: Projekte, die wöchentlich Aufnahmen erstellen, erreichen eine genauere Positionierung als Projekte, die nur einmal im Monat erfassen. Wie regelmäßig Sie Ihre Baustelle aufnehmen, ist damit der wichtigste Faktor, den Sie selbst beeinflussen können.

Mit jeder 360°-Aufnahme wird die KI-Autolokalisierung ein Stück genauer. Je besser die Positionierung funktioniert, desto schneller lassen sich offene Punkte erfassen, insbesondere in Kombination mit KI-Sprachnotizen, die gesprochene Informationen direkt in vollständige und richtig verortete Vor-Ort-Notizen umwandeln.

Wenn mehr Punkte präzise erfasst werden, wird auch die Fortschrittsverfolgung genauer und Entscheidungen können schneller getroffen werden. Diese Vorteile motivieren Teams wiederum dazu, häufiger Aufnahmen zu erstellen. Dadurch wird die KI-Autolokalisierung weiter verbessert. Dieser Effekt verstärkt sich über Projekte hinweg und mit der Zeit.

Von der KI-Autolokalisierung zu räumlich bewussten KI-Agenten

Mit Blick in die Zukunft schafft die KI-Autolokalisierung die Grundlage für eine neue Generation von Assistenten, die wir als räumlich bewusste KI-Agenten bezeichnen. Diese Funktionen sind heute noch nicht Teil unseres Produkts, werden aber aktiv im Rahmen unserer Forschung und ersten Prototypen untersucht.

Die Idee dahinter ist einfach: Wenn ein Agent nicht nur versteht, woran Sie arbeiten, sondern auch, wo Sie sich gerade auf der Baustelle befinden, kann er deutlich hilfreicher werden.

In internen Demos haben wir beispielsweise Agenten getestet, die Ihren aktuellen Kontext im Hintergrund berücksichtigen und beim Betreten eines Bereichs automatisch relevante Informationen aus OpenSpace, Procore oder ACC anzeigen könnten, einschließlich Vorschlägen für die nächsten Schritte.

Wir haben außerdem mit sogenannten „Röntgenmomenten“ experimentiert: Dabei ruft der Agent Archivaufnahmen genau des Raums auf, in dem Sie gerade stehen, beispielsweise aus der Zeit vor dem Trockenbau. So lässt sich nachvollziehen, was sich hinter einer Wand befindet, ohne sie öffnen zu müssen.

Auf Portfolioebene testen wir außerdem Zusammenfassungen, die visuelle und räumliche Informationen zu einem Überblick über Fortschritt und Risiken zusammenführen. Grundlage sind dabei reale Baustellendaten und nicht ausschließlich Dokumente.

Diese Konzepte befinden sich noch in einer frühen Phase und werden sich weiterentwickeln, während wir gemeinsam mit unseren Kunden lernen. Sobald sie weiter ausgereift sind, werden wir mehr zu Zeitplänen und konkreten Funktionen teilen.

Häufig gestellte Fragen

Benötigt KI-Autolokalisierung zusätzliche Hardware auf der Baustelle?

Nein. KI-Autolokalisierung funktioniert mit den Smartphones, die das Team ohnehin verwendet, und nutzt die Sensorkarte, die durch reguläre 360°-Aufnahmen entsteht. Es müssen keine Beacons montiert, keine Sensoren in Bauteile eingebaut und keine separaten Vermessungen der Baustelle durchgeführt werden. Dadurch lässt sich die Technologie einfach über mehrere Projekte hinweg einsetzen und nicht nur auf einzelnen Pilotprojekten.

Was passiert mit der Genauigkeit, wenn eine Baustelle nicht regelmäßig erfasst wird?

Die Genauigkeit nimmt ab, wenn sich die Baustelle immer stärker vom Stand der letzten Aufnahme unterscheidet. Wände, Decken und technische Installationen verändern die Sensorumgebung. Eine mehrere Wochen alte Sensorkarte bildet deshalb irgendwann nicht mehr den aktuellen Zustand des Gebäudes ab. Teams, die ihre Baustelle regelmäßig erfassen, halten die Positionierung aktuell. Werden Aufnahmen nur unregelmäßig erstellt, nimmt die Zuverlässigkeit zwischen den Begehungen entsprechend ab.

Mehr erfahren