Freiberuflicher Apache Kafka Engineer / Streaming-Spezialist (m/w/d)

Für ein Kundenprojekt suchen wir einen freiberuflichen Apache Kafka Engineer / Streaming-Spezialist (m/w/d). Die Tätigkeit erfolgt überwiegend remote, mit gelegentlichen Einsätzen vor Ort beim Kunden. Aufgaben Design, Aufbau und Betrieb von Kafka-Clustern (Self-Managed und/oder Confluent Cloud / MSK) Konzeption und Implementierung von Event-Streaming- und Event-Driven-Architekturen Entwicklung und Optimierung von Producern, Consumern und Stream-Processing-Pipelines (Kafka Streams / ksqlDB / Flink) Anbindung von Quell- und Zielsystemen über Kafka Connect (Source-/Sink-Connectoren) Sicherstellung von Performance, Skalierbarkeit, Hochverfügbarkeit und Fehlertoleranz Monitoring, Alerting und Troubleshooting (z. B. Prometheus, Grafana, Confluent Control Center) Etablierung von Best Practices für Topic-Design, Partitionierung, Schema-Management und Data Governance Wissenstransfer und Enablement des internen Teams Qualifikation Mehrjährige, nachweisbare Erfahrung mit Apache Kafka in Produktivumgebungen Tiefes Verständnis der Kafka-Internals (Broker, Partitions, Replikation, Consumer Groups, Offsets, ISR) Praxis mit Kafka Connect und dem Confluent-Ökosystem Erfahrung mit Stream Processing (Kafka Streams, ksqlDB oder Apache Flink) Schema-Management mit Schema Registry (Avro / Protobuf / JSON Schema) Fundierte Programmierkenntnisse (Java, Scala und/oder Python) Erfahrung mit Cloud-Plattformen (AWS MSK, Confluent Cloud, Azure Event Hubs o. ä.) Darüber hinaus verfügst du idealerweise über: Confluent-Zertifizierung (CCDAK / CCAAK) Erfahrung mit Kubernetes und Containerisierung (z. B. Strimzi Operator) Kenntnisse in Infrastructure as Code (Terraform, Ansible) Security-Erfahrung (mTLS, SASL, ACLs, RBAC) Erfahrung in Projekten innerhalb der Transport- und Logistikbranche Rahmenbedingungen Verfügbarkeit: innerhalb von ca. 2–6 Wochen Vertragslaufzeit: mindestens 3 Monate (Option auf Verlängerung) / Vollzeit Einsatzort: Remote / (ggf. vereinzelte Reisetätigkeit ins Allgäu) Sprache: Deutsch (mind. C1) / Englisch (mind. B2) Tagessatz All-In: nach Vereinbarung Haben wir dein Interesse an unserem Projekt geweckt? Dann freue ich mich auf deine Kontaktaufnahme. Bitte sende mir dein aktuelles Profil/CV inklusive deiner Verfügbarkeit und Tagessatzvorstellung. Originally posted on Himalayas