Big Data – Grundlagen und Nutzen

Viele Unternehmen analysieren externe und interne Daten schon lange und ausgiebig. Zur Bewältigung der Herausforderungen, die sich mit großen und schnell ändernden, oftmals polystrukturierten Datenmengen ergeben, muss jedoch in vielen Bereichen zusätzliche Technologie verwendet werden. Denn mit Big Data ist nicht nur eine andere Dimension von Datenmengen gemeint. Big Data steht für Volumen, Vielfalt und Geschwindigkeit (Volume, Variety and Velocity – VVV).

Volumen

Laut Wikipedia gibt es auf der Erde (Stand 2020) 60 Zettabytes (6*1022 Bytes = 60 Billionen Gigabytes) an digitalen Informationen, die zurzeit jährlich um 25 % wachsen. Wollte man die gesamte Datenmenge auf Blu-ray Discs brennen, so benötigt man einen Stapel Blu-ray Discs, der dem Gewicht der Giseh-Pyramide entspricht, wobei der “Datenhaufen” deren Größe übersteigt.

Klassische und viel zitierte Beispiele für Big Data sind die Informationen aus dem Bereich SocialMedia, wie z.B. Facebook und Twitter. Mögen diese Daten auch noch so relevant sein, so gibt es doch im Regelfall eine Vielzahl interner und externer Datentöpfe, die viel naheliegender sind.  Detaillierung, Kombination und Historisierung führen auch hier oftmals zu Datenmengen, die mit klassischen Ansätzen nur schwer zufriedenstellend bewältigt werden können. Die Segmentierung/Partitionierung und Priorisierung der Datenbestände ist ein entscheidender Schritt zur Lösung dieses Problems.

Insbesondere durch  Industrie 4.0 und IoT steigt die Datenmenge noch einmal deutlich.

Vielfalt

Die Vielzahl informationstechnischer Lösungen, die Globalisierung und die Geschwindigkeit, in der sich Systeme ändern, führt zu häufigen Änderungen im Bereich der Informationsquellen. Relationale Datenbanksysteme, die Grundlage vieler Datawarehouse-Systeme, erwarten jedoch vorstrukturierte Daten. Big Data-Lösungen erlauben hingegen die Daten erst zum Zeitpunkt der Abfrage / Analyse zu struturieren (ELT anstatt ETL).

Die Verarbeitung von Dokumenten, wie z.B. JSON, unterschiedlicher Strutkur ermöglichen die etablierten Datenbanken durch Verwendung entsprechender NoSQL-Modi. Für diesen Anwendungsfall sind im Regelfall keine neuen Technologien mehr notwendig.

Geschwindigkeit (Velocity)

Innerhalb weniger Sekunden erhalten Sie das Ergebnis umfangreicher Analysen, die Ihnen genau zeigen, wo sich Investionen lohnen, welche Kundgengruppen für eine Kampagne relevant sind oder wie Sie Prozesse optimieren können. Ein Versprechen, dass klassische Datawarehouse-Systeme bis zu einer gewissen Datenmenge erfüllen können.

Die Datenmengen, die es nun jedoch in Sekunden zu bewältigen gilt, überfordern diese Systeme oftmals. Die Kombination aus klassischen Datawarehouse-Lösungen, hauptspeicherbasierten und batchverabeitenden Systemen löst jedoch auch dieses Problem. Allerdings gilt es auch, den Blickwinkel auf relevante Aspekte der bereitzustellenden Informationen zu verändern. Unser Spezialisten-Team steht Ihnen bei der Umetzung und Etablierung dieser Änderungen in Ihrem Unternehmen gerne zur Seite.

Nutzen

Die Erwartungen gegenüber Big Data, die sich aus den Versprechungen der verschiedenen Anbieter ergeben, sind hoch. Gerne führen wir mit Ihnen zusammen Machbarkeitsstudien und kostenlose Beratungsgespräche zum Thema Big Data und verwandte Themen durch. So stellen Sie sicher, dass der Nutzen Ihrer geplanten Lösung gewahrt bleibt.

Consulting

Open Logic Systems ist Ihr Dienstleister für Big Data-Lösungen. Wir unterstützen Sie bei der Auswahl geeigneter Tools und Methoden, sowie der technologischen Umsetzung. Beispiele für die für uns verwendeten Technologien sind:

  • Hadoop
  • Impala
  • Oracle Exadata
  • IBM Watson
  • Talend ETL
  • Kafka
  • Parquet
  • Spark
  • Apache Drill
  • Hive

Auch die Darstellung / Visualisierung der Informationen in einer verständlichen Art und Weise bedarf, aufgrund der vielfältigen Ausprägungen, neuer Denkansätze. Wir beschäftigen uns seit geraumer Zeit mit diesen Fragestellungen (Visual Analytics), die mit dem Thema Big Data Hand in Hand gehen. Gerne stellen wir Ihnen Lösungen vor, die wir bei namhaften Kunden bereits erfolgreich implementiert haben.

Gerne unterstützen wir Sie auch bei der Analyse Ihrer Daten mittels künstlicher Intelligenz.

Rufen Sie am besten gleich an unter +49 2547 93998 0 oder schicken Sie eine E-Mail an info@open-ls.de.