Social Media Monitoring mit Big Data Technologien

Abstract

Der Artikel beschreibt, wie mit Hilfe der Big Data Technologien Hadoop, HBase und Solr eine skalierbare Architektur zur Online Medienüberwachung definiert und realisiert wird. Ausgangspunkt ist das bereits vorhandene Medienüberwachungstool eines Kunden. Dessen Analyse und dabei entdeckte Schwachstellen führen zu einem Re-Design des kompletten Systems. Sowohl dieser Design-, als auch der darauf folgende Entwicklungsprozess werden durchgängig erläutert. Das Hadoop Framework, das den Kern der Lösung bildet, wird zusammen mit weiteren Werkzeugen aus dem Hadoop Ökosystem vorgestellt und die Implementierungen zur Erfüllung der einzelnen Teilanforderungen werden detailliert aufgezeigt. Die Systemarchitektur, technologische Innovationen, sowie die wichtigsten Softwareprodukte werden genannt. Das abschliessende Kapitel beschreibt die aus diesen Prozessen gewonnenen Learnings.