Talking with TAI SOLUTIONS leads to unexpected ideas

INNOVATION UND BIG DATA ANALYTICS ZUR ERSTELLUNG EINES VORHERSAGENSYSTEMS FÜR DIE VERWALTUNG DER WASSERVERSORGUNG MIT CLOUDERA UND HANDOOP

 

Auch wenn wir nicht in der Lage sind, die plötzliche und störende Naturgewalt - die so genannten " Aus Gründen höherer Gewalt" - einzudämmen, können wir nach vorbeugenden Methoden suchen, die die Auswirkungen dieser Katastrophen die das Leben vieler Menschen stören können, reduzieren. Das nennen wir den Übergang von einem reaktiven zu einem prädiktiven Modell, d. h. Probleme zu lösen, bevor sie auftreten und nicht danach. Mit Cloudera Distribution Hadoop (CDH) und Big Data Analytics konnten wir diesen revolutionären Übergang vollziehen. Durch Tools zum einfachen Einfügen von unstrukturierten / halbstrukturierten Dataset aus jeder Art von Speicher, durch eine lineare Implementierung der benutzerdefinierten Datenerfassung und den umfassenden Einsatz von maschinellem Lernen haben wir eine kostengünstige Lösung geschaffen, die es uns erlaubt, zukünftige Ereignisse vorherzusagen, um auf diese vorbereitet zu sein. Früher konnten wir nur aufgrund von Überlastungen oder Rohrbrüchen auf eine Überschwemmung reagieren, heute können wir dies verhindern!

 

In Florenz liefert und verteilt Publiacqua täglich hochwertiges Wasser an 1,3 Millionen Menschen. Das ist unsere Verpflichtung, für die wir verantwortlich sind und wofür wir den höchsten Servicestandard anbieten. Wir alle sind uns der lebenswichtigen Bedeutung von Wasser bewusst, aber gleichzeitig auch seiner zerstörerischen Kraft, besonders wenn es nicht richtig verwaltet und kontrolliert wird. Die Geschichte hat uns gelehrt, dass unsere Dienstleistungen einem zerstörerischen Dominoeffekt ausgesetzt sind, wenn widrige Wetterbedingungen unsere Wasserverteilungssysteme überlasten. In diesen Fällen sind unsere Dienstleistungen ineffektiv und können auf regionaler Ebene verheerende Auswirkungen auf alle Produktionsprozesse und Dienstleistungen haben, die Zeiten bis zu einer Normalisierung können sehr lang sein

 

WIE MAN LERNT SCHÄDEN VORHERZUSAGEN

Um unser Serviceniveau gegen diese Art von Problem zu erhöhen, haben wir uns entschlossen, über die bereits vorhandenen Überwachungssysteme hinauszugehen, die nur alarmieren, wenn sich das Problem schon entwickelt. Wir brauchten ein Überwachungs-, Warn- und Berichtsmodell, das uns bei potenziellen Umweltkatastrophen, Materialfehlern und strukturellen Verschlechterungsproblemen rechtzeitig alarmiert, um vorbeugende Maßnahmen umsetzen zu können. D.h. wir brauchten ein vorausschauendes IT-Modell für unser Wassermanagementsystem und einen zuverlässigen Leitfaden mit einer nachgewiesenen Erfahrung im Aufbau von Big-Data-Lösungen, die uns den Weg zeigen konnte.

INNOVATION, FÄHIGKEITEN UND ERFAHRUNG

Wir wandten uns an TAI SOLUTIONS an, nicht nur wegen der Erfahrung und Fähigkeiten, sondern auch wegen der Aufmerksamkeit, des Verständnisses und des Engagements für die Entwicklung dauerhafter Lösungen. Sie entwarfen und erstellten ein Modell, das auf Big Data- und maschinellen Lerntechnologieplattformen basiert ist. 

TAI SOLUTIONS entschied sich für CDH-Plattform von Cloudera, einschließlich Apache Hadoop, da es in der Lage ist unsere große Verbreitung Bedürfnisse zu erfüllen. Die Einfachheit von CDH spielte eine entscheidende Rolle wegen der Benutzerfreundlichkeit. Außerdem hat Cloudera Hadoop in viele andere große Open Source-Projekte integriert, das hat uns geholfen ein fortschrittliches System zu entwickeln, mit dem Big-Data-Arbeitsprozesse erstellt werden können.

Durch die Kombination von Apache Flume für die Datenerfassung in Handoop und Apache Sqoop für die Datenbankintegration erhielten wir genau die Konnektivität, die wir benötigten. Apache Spark erfüllte unsere erweiterten Analyseanforderungen wegen seinem Batch-Processing und der Echtzeitverarbeitung. Apache Oozie wurde für die Workflow-Organisation eingeführt, Apache Hive für den Batch-Processing unserer Hadoop-Daten und Apache Parquet um unsere Datenbank zu strukturieren.

Durch den Vergleich und die Analyse in Echtzeit sowohl der Daten von den Wetterstationen als auch der Sensoren zur Steuerung der Wasserverteilung und der Archivdaten können wir nun kurz- und langfristige Änderungen des Wasserflusses vorhersagen und sie mit extremer Präzision handeln. Außerdem können alle quantitativen und qualitativen Änderungen des Wasserflusses, die nicht mit dem Wetter zusammenhängen, verfolgt werden, und wir können vorbeugende Wartungsmaßnahmen zu geringeren Kosten als bisher durchzuführen.

"Big Data Analytics sind nur aufgrund der Zuverlässigkeit der Datenquellen nützlich, und die IoT-Überwachung garantiert dies.
 
Wir sind in der Lage genau zu wissen, wie Dinge verwendet werden, wie sie funktionieren und welche Maßnahmen wir bei Bedarf ergreifen sollen.
 
TAI SOLUTIONS hat uns geholfen, ein Überwachungssystem zu entwickeln, was garantieren kann dass die von uns erhaltenen Daten zuverlässig sind und daher für unsere Analysen verwendbar sind."
 
IT Department
Publiacqua

EIN BLICK IN DIE ZUKUNFT

Wir können uns unser Leben ohne eine hochwertige Wasserversorgung nicht vorstellen, das ist die Grundlage unserer Verpflichtung für die Bürger und Unternehmen von Florenz. Unser vorausschauendes Wasserversorgungsmanagementsystem ermöglicht es uns, unser Engagement auch bei starken Regenfällen, Überschwemmungen oder Stürmen aufrechtzuerhalten. Wir bauen und schützen die Zukunft, erfüllen unsere Verpflichtungen und verteidigen die Interessen unserer Kunden.

„Wir haben die Kraft von Technologie und Innovation unterstützt und haben das Niveau erhöht, um neue Standardmodelle zu finden. Wir glauben, dass die Qualität der Lösungen an der Innovation gemessen werden muss, die diese Lösungen bringen können. Unser neues vorausschauendes Wasserversorgungsmanagementsystem ist ein perfektes Beispiel."
 
Technology & Innovation
Publiacqua
„TAI SOLUTIONS hat uns beim Aufbau einer Lösung geholfen, die nicht nur unser Unternehmen veränderte, sondern es uns auch ermöglichte, unsere Kunden bei möglichen Wetternotfällen zu schützen.“
 
 
 
IT Operations
Publiacqua
„Open Source-Lösungen können Flexibilität und Reaktionsfähigkeit garantieren, die mit einem Problemlösungsansatz nicht erreicht werden kann. Unser Vorhersagemodell, mit dem unsere Wasserversorgungsdienste in Krisenzeiten immer aktiv bleiben können, kann nur durch Investitionen im Open source up to date bleiben.“
 
Technology & Innovation
Publiacqua