RTL Deutschland ist vor allen Dingen als Fernsehsender bekannt, gehört in Verbindung mit der AdAlliance jedoch ebenso zu einem der größten Netzwerke für die Vermarktung von Onlineangeboten. Bereits seit einigen Jahren begleiten wir das Medienunternehmen bei der Entwicklung und Umsetzung moderner Big Data-Lösungen.

Fachlich geht es dabei um die Analyse, Verarbeitung und Lieferung von Daten, die genutzt werden, um z.B. Reporte zu erstellen oder Werbekampagnen auszuspielen.

Datenquellen sind sowohl intern anfallende Daten (z.B. Bewegungsdaten auf Webseiten) als auch Daten von externen Dienstleistern (z.B. Logs von Werbeservern) und umfassen meist viele Terabyte. Um dem hohen Datenvolumen und den verschiedenartigen Datenquellen und Einsatzgebieten gerecht zu werden, setzen wir insbesondere auf flexible und horizontal skalierbare Lösungen in AWS und der Google Cloud.

Typische Aufgaben der Datenverarbeitung sind z.B. ETL-Strecken oder Importe in den Datalake, die mit Technologien wie Spark, Airflow und BigQuery umgesetzt werden. Für Echtzeit-Verarbeitung werden zudem Streaming-Dienste wie Kinesis oder Pub/Sub eingesetzt. Zur Auslieferung der Daten an externe Partner (wie z.B. Werbeservern) stellen wir darüber hinaus eine HTTP Schnittstelle zur Verfügung. An diese wird die zusätzliche Anforderung gestellt, im Millisekundenbereich eine Antwort zu liefern. Hier setzen wir auf eine Microservice-Architektur, die basierend auf AWS Fargate und ECS betrieben wird und im Backend Datenbanken mit niedriger Latenz, wie z.B. DynamoDB, verwendet.

Die Energiewende ist da und die rasant steigenden Anforderungen stellen vor allem Verteilnetzbetreiber, Stadtwerke und Kommunen vor große Herausforderungen. Die Auslastung der (Strom-)Netze muss stetig geprüft und der Ausbau von entsprechender Infrastruktur gut geplant werden. Damit eine sozial gerechte Energie-, Verkehrs- und Wärmewende gelingt, arbeitet die DigiKoo GmbH aus Essen an digitalen Lösungen für eine einfache und schnelle Entscheidungsfindung.

DigiKoo steht für digi-tale Koo-peration und ist 100% Tochter der Westenergie-Gruppe. DigiKoo hat das DigiPAD erfunden – eine digitale Plattform für Netzbetreiber, Stadtwerke und Kommunen. Mehr Informationen hierzu finden sich unter www.digikoo.de.

Wir unterstützen DigiKoo dabei, Veränderungen im Netz planbarer zu machen. Wir analysieren Entwicklungen des Energiebedarfs in der Wärmeversorgung und ermitteln einen bedarfsgerechten Ausbau von Ladeinfrastruktur für Elektromobilität. Verschiedene Algorithmen verschneiden Daten aus verschiedenen Quellen, visualisieren und kombinieren diese in einer Online Plattform. Für das Management und die Analyse der Daten verwenden wir Tools wie PostgreSQL, PostGIS, Python und GeoPandas. Die Algorithmen können lokal oder in einer der Cloud-Infrastrukturen ausgeführt werden.

Wir analysieren georeferenzierte, sozioökonomische Daten und reale Netzdaten und erstellen Modelle, die die gegenwärtigen und zukünftigen Situationen repräsentieren. Dabei erfordert die Verknüpfung von externen Daten zu Gebäudemerkmalen, Bewohnerstruktur und Geo-Daten ein hohes Maß an Sorgfalt in den Bereichen Data Cleaning und Data Preparation. Durch die Bereitstellung und Verschneidung von plausiblen Daten gewinnen wir Erkenntnisse, mit denen u.a. der Energieverbrauch, der CO2-Ausstoß oder auch die Kosten pro Haushalt in verschiedenen Szenarien online dargestellt werden können.

Die Besonderheit bei der Analyse und Verarbeitung georeferenzierter Daten ist die spezifische Aussagekraft für bestimmte Gebiete. Für die geographische Segmentierung von Gebieten verwenden wir Voronoi-Diagramme und haben zusätzlich einen eigenen Algorithmus entwickelt, der auf dem k-Nearest-Neighbors-Verfahren und geographischer Indexierung mit dem globalen Geo-Index H3 von Uber basiert. Die Ergebnisse geographischer Analysen werden dann mit hoher Genauigkeit auf Karten visualisiert und mit den relevanten Statistiken in Reports aufbereitet.

Text under customer approval...

Business Intelligence (BI) umfasst Methoden und Technologien zur Sammlung, Verarbeitung, Auswertung und Darstellung von (häufig: unternehmensinternen) Daten.

Grundsätzlich unterscheiden wir dabei zwei Phasen:

• Data Warehousing
  Hierbei geht es um die Überführung der Quelldaten, die i.d.R. in Systemen vorgehalten werden, die eher auf Datenerfassung ausgelegt sind (Extraktion), über die Bereinigung und Aufbereitung dieser Daten (Transformation) bis hin zum Laden (Load) dieser nun abfragefreundlich aufbereiteten Daten in den sog. "Presentation Layer". Dabei arbeiten wir bevorzugt mit den Tools von Microsoft (SSIS), SAP BusinessObjects (BODS), Pentaho (Kettle bzw. PDI) oder einfach prozedural direkt auf der Datenbank.
• Business Intelligence i.e.S.
  Sind die Daten im Data Warehouse vorhanden, können Sie in Berichten und Dashboards in unterschiedlichen Aggregationsstufen und unter diversen Aspekten (Dimensionen) ausgewertet werden. Wir arbeiten dabei u.a. mit den Tools von SAP BusinessObjects, Tableau und Microsoft BI.

Wie unterstützen wir unsere Kunden?

Aufgrund unserer langjährigen Erfahrung in Business Intelligence können wir unsere Kunden bei allen zugehörigen Aufgaben entweder kompetent unterstützen oder diese vollständig für sie übernehmen:

• Projektmanagement,
• Anforderungsaufnahme,
• Infrastruktur-Aufbau und Betrieb,
• Datenmodellierung (dimensional),
• ETL-Entwicklung,
• Reporting,
• Schulung.