Loading ...

CarToX Belegarbeit

Description
CarToX Belegarbeit

Im Rahmen des Forschungsprojekts CarToX habe ich mittels Python, Datenanalysen auf dem Big Data-Cluster des Fraunhofer IVI durchgeführt.

Dabei kamen im ersten Schritt folgende Technologien/ Frameworks zum Einsatz: Apache Hadoop, Apache HBase, Apache Spark (PySpark), Jupyter Notebook.

Während meiner Analyse habe ich eigenständig ein Geodatenbankkonzept für Elasticsearch entwickelt, da ich die Proto-Visualisierungen in Jupyter Notebooks als mühselig empfand. Die Dateneinspeisung wurde mittels Logstash per CSV realisiert. Die finale Visualisierung erfolgte dann in Kibana-Dashboards.

Schlussendlich hat Dr. Jörg Holfeld diese Idee als so gut empfunden, dass ich in den Folgemonaten daran weiterentwickelte. Heute wird diese Idee als eines der Abschlussprojekte des Fraunhofer IVI im CarToX-Projekt genutzt.

Download Beleg

Categories: