Arbeitspakete

AP 4: Entwicklung einer Datenplattform und Visualisierungsoberfläche

Im Projekt fällt eine große Menge verschiedenster Arten von Daten an: Niederschlags- und Durchflussinformation des neu aufgebauten Sensornetzes (AP 2), Stations- und Radardaten (AP 5), Kanalnetzdaten und Ergebnisse hydraulischer Berechnungen (AP 6) sowie die Ergebnisse der in AP 5 und AP 6 entwickelten Vorhersagemodelle.

Alle diese Daten müssen integriert und einer Auswertung und Weiterverarbeitung zugänglich gemacht werden. Hierfür wird eine zentrale skalierbare Datenplattform als Datendrehscheibe aufgebaut, in der alle Daten gesammelt werden. Damit die Daten aus den verschiedenen Quellen in die Plattform aufgenommen, verarbeitet und operativ genutzt werden können, müssen verschiedene Grundlagen geschaffen werden. Dazu zählt insbesondere die Definition geeigneter Schnittstellen für den Datentransfer und die Anbindung der verschiedenen Quellen an die Plattform sowie die Konzeption geeigneter Extract-Transform-Load Prozesse (ETL) zur Durchführung von auf die jeweilige Anwendung zugeschnittenen Datentransformationen. Als Grundlage für die Plattformentwicklung wird auf das von der Firma neusta entwickelte Plattformkonzept hetida zurückgegriffen, das unter Einsatz von Open Source Komponenten (z.B. OpenTSDB, Kafka, Grafana, Geoserver, Leaflet) realisiert wird. Dabei wird die Plattform auf die Anwendung in KIWaSuS angepasst und um anwendungsspezifische Komponenten erweitert werden. Da ‚hetida‘ derzeit auf den Bereich der Zeitreihen spezialisiert ist, zählt dazu insbesondere die Prozessierung von räumlich und raum-zeitlich verteilten Datensätzen wie den Radardaten (AP 5) oder den Überflutungsflächen (AP 6).

Für die KI-basierten Anwendungen zum Datenqualitätsmanagement und zur Vorhersage wird eine modulare KI-Modell-Infrastruktur aufgebaut. Diese Komponente ermöglicht das Management von dynamisch integrierbaren KI-Komponenten über ihren vollständigen Lebenszyklus hinweg.

Zur Visualisierung der Messwerte aus AP 2 (Zeitreihen der Messtellen) sowie der Prognosen aus AP 5 (Niederschlagsverteilung) und AP 6 (Überflutungsflächen) wird ein intuitiv bedienbares Dashboard (grafische Benutzeroberfläche) erstellt, das als Grundlage für AP 7 dient.

Ansprechpartner:innen: