Skalierbare Geodatenverarbeitung in der Cloud mit Argo Workflows

Frederik Diehl and Holger Bach

Playlists: 'fossgis2024' videos starting here / audio

Auch von amtlichen Geodaten wird heutzutage eine hohe Aktualität erwartet. Aus diesem Grund setzt die Landesvermessung Niedersachsen (LGLN) bei der Verarbeitung ihrer Geodaten vermehrt auf vollständig automatisierte Prozesse. Um trotz wachsender Datenmengen in Zukunft möglichst schnell aktuelle Geodaten für ganz Niedersachsen liefern zu können, muss die Verarbeitung in skalierbaren Cloud-Umgebungen erfolgen. Zur Orchestrierung setzen wir Kubernetes und die Workflow-Engine Argo Workflows ein.

Für die Geodaten-Dienstleistungen und auch für zukünftige KI-Anwendungen des Landesamtes für Geoinformation und Landesvermessung Niedersachsen (LGLN) sind große Mengen an Geodaten eine wesentliche Grundlage.
Im zweitgrößten Bundesland müssen schon immer große Mengen an Daten verarbeitet werden. Diese Datenmengen steigen, auch durch neue Fernerkundungssensoren - auf Drohnen, Flugzeugen und Satelliten - nun deutlich an.

Im Vortrag zeigen wir, wie wir mit Argo Workflows und Kubernetes die Verarbeitung unserer Geodaten in der Cloud skalierbar umgesetzt haben. Wir zeigen Workflows zur Verarbeitung von Punktwolken, Höhenmodellen, und den Ergebnissen unserer „KI-Gebäudeerkennung“, aber auch, wie wir eine CI/CD-Pipeline mit Argo Workflows aufgesetzt haben.

Download

Embed

Share:

Tags