Bereits in den den letzten Artikel habe ich mich mit dem Installieren von Elasticsearch und Kibana beschäftigt. Heute will ich mir mal anschauen, wie man Daten in Elasticsearch importieren kann. Ziel ist es das ganze mit Python zu realisieren.
Als Datensatz nehme ich Sensordaten von luftdaten.info. Hier habe ich mir aus dem Archiv die Daten für den SDS011 un den DHT22 Sensor heruntergeladen und entpackt. Das sind in Summe ungefähr 11 GB.
WeiterlesenIn einem der letztem Artikel habe ich bereits gezeigt, wie man Elasticsearch auf einem CentOS System installiert. Heute möchte ich einen Schritt weitergehen und zeigen wie man das ganze mit Ansible automatisieren kann.
Weiterlesen
Bei Kibana handelt es sich um ein Elasticsearch Frontend. Es liefert alle klasseischen Visualisierungen mit die man so kennt. Wie genau man dieses Frontend installiert und die ersten Beispieldaten lädt schauen wir in diesem Artikel an.
WeiterlesenVon Elasticsearch haben die meisten von euch bestimmt schon mal gehört. Wahrscheinlich im Zusammenhang mit der Analyse von Daten im speziellen von Log Daten. Ich will heute in diesem Artikel zeigen, wie man eine Installation unter CentOS durchführt.
Elasticsearch ist eine verteilte Echtzeit-, Such- und Analyseplattform. Das hört sich jetzt erstmal so an, als ob man alle gerade interessanten Themen unterbringen will. Aus diesem Grund hier noch mal etwas genauer. Elasticsearch ist ein verteiltes System, weil die Information in Knotencluster organisiert werden, die verteilt auf mehreren Servern laufen. Es ist Echtzeit, da die Daten indiziert sind und man dadurch sehr schnell Antworten auf die Entsprechenden Fragen bekommt. Und zu guter letzt, es ist eine Recherche- und Analyseplattform da wir mit diesem System Daten untersuchen können.
Weiterlesen
Immer mal wieder treffe ich auf das Thema MQTT sowohl beruflich wie auch privat. Da ich mir vor kurzer Zeit nun für meinen Raspberry PI ein z-wave Adapter angeschafft habe, ist nun meine Idee die Informationen meiner z-wave Devices wie MQTT in meine Hausautomatisierung einzubinden.
Aus diesem Grund will ich hier mal kurz zeigen wie man auf dem Raspberry Pi einen MQTT Broker installiert. Zuvor will ich aber kurz erklären, was MQTT ist und wofür man das ganze verwendet.
Weiterlesen