Aufbau einer souveränen Datenplattform zur Verarbeitung und Analyse von Echtzeitdaten aus IoT-Geräten (Edge)
Herausforderung
Der Kunde benötigte eine Lösung zur Einspeisung, Verarbeitung und Analyse von Echtzeitdaten, welche aus IoT-Geräten generiert werden. Das übergeordnete Ziel war die Konzeption und Implementierung einer souveränen Datenplattform, welche im Zuge eines digitalen Zwillings mittels der Stackable Data Platform (SDP) exemplarisch verprobt werden soll.
Vorgehen
Vorhanden waren Sensordaten, die mithilfe eines Tools (Node-RED) bereits erfasst wurden. Die gesamte nachgelagerte Kette fehlte: ein Ingest-Layer, die persistente Speicherung, eine Verarbeitungs- und Analyseschicht sowie die Visualisierung der Daten.
Zur Validierung der Architektur diente ein IoT-Anwendungsfall. Erstellt wurde das digitale Abbild einer sensorisch überwachten Anlage (smartes Gewächshaus). In dem Anwendungsfall werden kontinuierlich Zeitreihendaten, Ereignisdaten und Zustandswechsel erzeugt. Die Architektur lässt sich damit ohne konzeptionelle Änderungen auf entsprechende Szenarien übertragen.
Die erzeugten Daten wurden auf der Stackable Data Platform in eine persistente Datenschicht eingefügt, durch die zur Verfügung gestellten Services verarbeitet und zur Analyse aufbereitet. Abschließend wurde ein Live-Dashboard mit Grafana entwickelt.
Kundennutzen / Mehrwert
Der Kunde hat durch unsere Unterstützung nicht nur eine fertige Datenpipeline zur Kontrolle und Verarbeitung seiner Echtzeitdaten erhalten, sondern auch das nötige Wissen eine solche Plattform eigenständig zu betreiben und weiterzuentwickeln. Dieses Wissen und die Erfahrungen werden in der Abteilung Innovationsmanagement genutzt, um die Nutzbarkeit der Plattform für einen globalen Datenraum / Data Mesh-Konstrukt zu bewerten.
Kunde
Ein zentraler IT-Dienstleister einer deutschen Landesverwaltung verantwortet die Bereitstellung, den Betrieb und die Weiterentwicklung sicherer IT-Infrastrukturen und digitaler Verwaltungsservices. Er unterstützt zahlreiche Behörden und öffentliche Einrichtungen bei der Digitalisierung, dem Betrieb geschäftskritischer Fachverfahren sowie bei Themen rund um Cloud, IT-Sicherheit und moderner Arbeitsplatz-IT.
Branche: Öffentlicher Dienst
Methoden & Technologien
- Stackable Data Platform
- Kubernetes / Rancher
- Grafana
- Apache Superset
- Apache ZooKeeper
- Apache Druid
- Apache Kafka
- MinIO (S3)
- Python
- Node-RED
