Rund zwei Drittel aller Unternehmen beschäftigen sich aktuell mit dem Hadoop-Framework. Zwölf Prozent von ihnen haben es weltweit bereits produktiv im Einsatz (in Europa acht Prozent), der Rest macht Pilotprojekte oder hat zumindest eine Hadoop-Initiative geplant. Dies ergab die im Herbst 2016 veröffentlichten Umfrage „Hadoop und Data Lakes – Use Cases, Nutzen und Grenzen“ des Business Application Research Center (BARC). An ihr nahmen laut der Autoren 380 Befragte aus Europa und Nordamerika teil.
Über die Hälfte der Teilnehmer (53 Prozent) nutzt vorrangig transaktionsorientierte Daten in Hadoop, aber auch Log-Daten (40 Prozent) und Clickstream-Daten/ Web-Analytics (33 Prozent) finden zunehmend Interesse. Über ein Viertel der Befragten nutzt zudem Dokumente und Texte in Hadoop-Anwendungen. Dies erscheint erstaunlich hoch im Vergleich zu verschiedenen BARC-Studien aus vergangenen Jahren. Unter den Anwendungsgebieten dominieren Customer-Intelligence-Projekte (32 Prozent) dicht gefolgt von Predictive-Analytics-Projekten (31 Prozent).
Noch durchschnittlich kleine Datenmengen in Hadoop
Die dabei verwalteten und analysierten Datenmengen sind bis dato noch vergleichsweise gering mit bis zu 25 Terabyte (TB) in 59 Prozent der Unternehmen. Szenarien mit über einem Petabyte (PB) bleiben die große Ausnahme (ein Prozent). Beschränkte sich zunächst der Einsatzmodus von Hadoop und MapReduce in erster Linie auf Batch-Anwendungen, steigen mittlerweile die Anforderungen an die Datenaktualität. So spielen Streaming (21 Prozent) und eine Near-Time-Nutzung der Daten (35 Prozent) eine wachsende Rolle.
Technisch setzt fast ein Drittel der Befragten zur Umsetzung von Hadoop-Projekten auf kommerzielle Produkte bzw. Hadoop-Distributionen. Mehr als ein Viertel (27 Prozent) nutzt Apache-Komponenten zum Aufbau eines eigenen Hadoop-Ökosystems, was laut der Autoren ein überraschend hoher Wert ist, da für die Implementierung, Wartung und Betrieb doch ein tiefes Wissen notwendig ist, um die Komponenten aufeinander abzustimmen und zu administrieren.
Technisch setzt fast ein Drittel der Befragten zur Umsetzung von Hadoop-Projekten auf kommerzielle Produkte bzw. Hadoop-Distributionen. Mehr als ein Viertel (27 Prozent) nutzt Apache-Komponenten zum Aufbau eines eigenen Hadoop-Ökosystems, was laut der Autoren ein überraschend hoher Wert ist, da für die Implementierung, Wartung und Betrieb doch ein tiefes Wissen notwendig ist, um die Komponenten aufeinander abzustimmen und zu administrieren.
Auch die QUNIS beschäftigt sich intensiv mit Hadoop und setzt aktuell erste Projekte um. Neben dem Hadoop-Frame kommen dabei bei Bedarf auch weiteren Techniken zur Umsetzung von Advanced-Analytics-Anwendungen zum Einsatz wie etwas „R“.
Die Umfrage zu Hadoop finden Sie als Download auf der Website der BARC