Um Daten in ein Kafka Cluster zu übertragen, benötigt man einen Producer. Wie man einen solchen Producer in Python implementiert schauen wir uns in diesem Artikel etwas genauer an.
Kafka Standalone Docker Container
Nachdem wir nun wissen, wie man Kafka auf einem Raspberry Pi installieren kann, wollen wir nun das ganze auf einen Docker Container übertragen. Dafür werden wir im Laufe des Artikels einen Dockerfile erstellen, welches als Grundlage für den Dockercontainer dient. Die Konfigrurationsdateien die für das Setup verwendet wurden, sind bereits in dem Raspberry Pi Artikel erläutert.
Kafka – Speicherung der Daten
In der letzten Zeit haben wir uns hier im Blog angeschaut, wie man Kafka auf einem Raspberry Pi installiert und wie man Kafka und Zookeeper in systemctl einbinden. Diesmal wollen wir uns damit beschäftigen, wie man den Speicherort der Kafka Daten konfiguriert und wie dieser Speicher verwaltet wird.Weiterlesen
systemctl für Kafka und Zookeeper
Im letzten Artikel habe ich gezeigt wie man Kafka mit Zookeeper auf einem Raspberry Pi installiert. Will man Kafak nicht nur zum Testen verwenden ist es sinnvoll, sowohl Kafka wie Zookeeper über systemctl verfügbar zu machen. Dafür werden wir für beide Anwendungen einen eigenen User auf dem Raspberry Pi (Affiliate Link) anlegen und anschließend ein Startskript für Systemctl erstellen.
Apache Kafka auf dem Raspberry Pi
Einige von euch werden bereits von dem Messaging System Kafka gehört haben. Dieses wird für die Verarbeitung großer Datenmengen verwendet oder wenn mehrere Anwender die gleichen Daten aus einem Quellsystem lesen sollen. Um das ganze einmal zu testen, will ich euch in diesem Artikel zeigen wie man diese Streaming Plattform auf einen Raspberry Pi installiert. Ich verwende dafür einen Raspberry Pi in Version 3.