ArcGIS Pro

Was ist neu für GeoAI in der ArcGIS Pro 3.7 Image Analyst-Erweiterung?

Grafik mit drei kreisförmigen Ausschnitten, die unterschiedliche GeoAI-Anwendungsfälle zeigen: links Fahrzeugerkennung mit Bounding-Boxen, in der Mitte Segmentierung von Vegetation und Gebäuden, rechts Darstellung von Trainingsdaten und Klassifikationsergebnissen in einer Benutzeroberfläche.

Die Version ArcGIS Pro 3.7 führt mehrere neue Werkzeuge und Verbesserungen für die GeoAI-Funktionalitäten innerhalb der Image Analyst-Erweiterung ein. Dieses Update konzentriert sich darauf, die Effizienz bei der Beschriftung (Labeling) zu erhöhen, fortschrittliche Foundation-Model-Architekturen zu unterstützen und die Performance bei groß angelegten Inferenzprozessen zu optimieren.

In diesem Blogartikel werden die neuen und erweiterten Funktionen entlang der GeoAI-Workflows vorgestellt:

  • Neue Zeichenwerkzeuge für das Labeling
  • Werkzeug zur automatischen Erkennung auf Basis von Feature-Classes für das Labeling
  • KI-gestütztes Labeling für mehrere Klassen (Multiclass)
  • Native Videobeschriftung
  • Erweiterte Überprüfung von Trainingsdaten
  • Unterstützung für Foundation-Model-Backbones
  • Werkzeug „Pixel mit Deep Learning transformieren“
  • Optimierte Inferenz-Performance

Neue Zeichenwerkzeuge für die Beschriftung

Zusätzlich zu Bounding-Boxen und Polygonen können Sie nun Punkt- und Linien-Zeichenwerkzeuge im Bereich „Label Objects for Deep Learning“ verwenden. Während das Definieren eines Rechtecks mehrere Klicks erfordert, erfasst das Punktwerkzeug Objekte mit einem einzigen Klick. Ebenso vereinfacht das Linienwerkzeug die Erfassung linearer Objekte wie Straßenmittellinien. Durch die Verwendung der Buffer-Einstellung beim Export können Sie automatisch Trainingsmasken aus diesen vereinfachten Geometrien generieren. Dieser Workflow erhöht die Effizienz erheblich für Objekte, die durch einen Puffer mit fester Breite definiert sind.

Screenshot einer Luftaufnahme mit markierten Punkten zur Baum-Erkennung im ArcGIS Pro „Label Objects for Deep Learning“-Werkzeug, inklusive Export-Einstellungen mit Buffer-Radius.
Mit dem Punktwerkzeug erfasste Baumstandorte, unter Verwendung eines Puffers zum Export von Trainings-Chips.

Automatische Erkennung mithilfe des Feature-Class-Werkzeugs für die Beschriftung

Das Werkzeug „Auto-detect using Feature Class“ im Bereich „Label Objects for Deep Learning“ erzeugt Segmentierungsmasken aus vorhandenen Punktdaten. Es verwendet Deep Learning, um Objektgrenzen zu identifizieren, die mit Eingabepunkten verbunden sind, wie beispielsweise Gebäudezentren oder Baumstandorte, und erstellt automatisch Trainingspolygone. Dies vereinfacht die Umwandlung vorhandener Punktdatensätze in die für Instanzsegmentierungsmodelle erforderlichen Labels.

Luftaufnahme eines Parkplatzes mit zahlreichen Autos, die durch rote Umrisse automatisch als Objekte für das Labeling erkannt und segmentiert wurden.
Automatische Umwandlung einer Punkt-Feature-Class in präzise Instanzsegmentierungsgrenzen um Fahrzeuge.

Multiklassen-KI-gestützte Beschriftung

Das Werkzeug „Text Prompt“ im Bereich „Label Objects for Deep Learning“ unterstützt jetzt die Multiklassenerkennung innerhalb eines einzigen Durchlaufs. Wenn Sie mehrere Objektnamen (zum Beispiel Bäume, Häuser) in das Text-Prompt-Feld eingeben, erstellt das Werkzeug gleichzeitig die Klassen und generiert die Labels für jeden Objekttyp. Dadurch entfällt die Notwendigkeit mehrerer Beschriftungsdurchläufe beim Aufbau komplexer Trainingsdatensätze.

Luftaufnahme mit KI-gestützter Multiklassen-Beschriftung, bei der unterschiedliche Objekte wie Bäume und Gebäude gleichzeitig mit farblich unterschiedlichen Bounding-Boxen erkannt und markiert werden.
Multiklassen-Text-Prompt-Werkzeug, das Bäume und Häuser gleichzeitig in einem einzigen Durchlauf innerhalb des „Label Objects“-Panels beschriftet.

Native Videobeschriftung

Das Werkzeug „Label Objects for Deep Learning“ unterstützt jetzt nativ Videodateien, wodurch das Sammeln von Trainingsdaten direkt aus Videodateien möglich wird. Die Software übernimmt die Frame-Extraktion intern, sodass Sie Objekte in einzelnen Frames, wie beispielsweise Fahrzeuge oder Infrastruktur, beschriften können. Diese Integration vereinfacht den Workflow vom rohen Video bis zum Modelltraining.

Erweiterte Überprüfung von Trainingsdaten

Das Werkzeug „Review labels and training data“ wurde erweitert, um alle Arten von Deep-Learning-Aufgaben zu unterstützen. Während es zuvor auf die Objekterkennung beschränkt war, sind nun Qualitätssicherung und Qualitätskontrolle auch für Instanzsegmentierung, Objektklassifizierung, Bildklassifizierung, Pixelklassifizierung und Bild-zu-Bild-Transformation möglich. Dies gewährleistet einen konsistenten Validierungsprozess über alle GeoAI-Workflows in ArcGIS Pro hinweg.

Benutzeroberfläche zur erweiterten Überprüfung von Trainingsdaten in ArcGIS Pro, mit mehreren Bildkacheln und farblich markierten Objekten zur Qualitätskontrolle verschiedener Deep-Learning-Aufgabentypen.
Benutzeroberfläche zur Überprüfung von Trainingsdaten mit Datensätzen für Bild-zu-Bild-Transformation, Instanzsegmentierung und Pixelklassifizierung.

Unterstützung für Foundation-Model-Backbones

Neue Foundation-Model-Backbones „Dynamic One-For-All (DOFA)“ und „TerraMind“ werden für Fernerkundungsanwendungen unterstützt. Zur Unterstützung dieser Architekturen und zur Verbesserung von Multispektralbild-Workflows wurde ein neues Modellargument „wavelengths“ hinzugefügt. Während Wellenlängeninformationen normalerweise aus den EMD-Metadaten des Modells abgeleitet werden, können Nutzende sie nun manuell angeben, um sicherzustellen, dass das Modell die spektralen Dimensionen der Eingabebilder korrekt interpretiert.

Werkzeug Pixel mithilfe von Deep Learning transformieren

Das neue Geoverarbeitungswerkzeug „Translate Pixels using Deep Learning“ bietet einen dedizierten Workflow für die Bild-zu-Bild-Transformation. Sie können Aufgaben wie Super-Resolution, die Kolorierung von Graustufenbildern oder die Transformation von RGB-Bildern in topografische Karten durchführen. Das Werkzeug bietet im Vergleich zu den Standard-Klassifikationswerkzeugen eine intuitivere Benutzeroberfläche zur Erstellung verbesserter oder stilisierter Bildprodukte.

Geoverarbeitungsoberfläche in ArcGIS Pro mit dem Werkzeug „Translate Pixels using Deep Learning“, einschließlich Eingabe- und Ausgabeparametern sowie Beispielbildern für Bildkolorierung und Super-Resolution von Satelliten- und Luftaufnahmen.
Translate Pixels-Werkzeug, dargestellt zusammen mit Beispielen für Bildkolorierung und Super-Resolution.

Optimierte Inferenz-Performance

Die optimierten Kern-Inferenzwerkzeuge können große Datenmengen, die in Ordnern gespeichert sind, besser verarbeiten, wie beispielsweise Bilddaten von Drohnen oder mobilen Sensoren. Insbesondere liefert das Werkzeug „Detect Objects Using Deep Learning“ nun deutliche Leistungssteigerungen, wenn Bildsammlungen in einem ordnerbasierten Workflow verarbeitet werden. Interne Benchmarks zeigen, dass es in bestimmten Szenarien mit hohem Datenvolumen jetzt bis zu viermal schneller ist.

Zusammenfassung

Diese Updates konzentrieren sich darauf, den manuellen Aufwand zu reduzieren und die Geschwindigkeit von GeoAI-Workflows zu erhöhen. Durch die Optimierung des Labelings und der Backend-Performance unterstützt ArcGIS Pro 3.7 Sie dabei, schneller von Rohbilddaten zu verwertbaren Ergebnissen zu gelangen.

Hinweis: Dieser Text basiert auf einer Übersetzung des englischen Originalartikels. Den Originaltext finden Sie hier: