Senior Kafka Engineer | Confluent & AWS

Kogo szukamy? Szukamy doświadczonego Kafka Engineera , który dołączy do zespołu Data Platform i będzie uczestniczył w budowie nowoczesnego, hybrydowego środowiska Kafka łączącego on-premise i AWS . To projekt dla osoby, która dobrze zna Kafka i Confluent , lubi pracę z architekturą, automatyzacją i cloudem oraz chce mieć realny wpływ na rozwój platformy. Oferujemy 1000–1250 zł netto + VAT / dzień B2B Pracę hybrydową – tylko 1 dzień w miesiącu w biurze we Wrocławiu Pracę przy dużym, technicznie wymagającym projekcie Data Platform Realny wpływ na architekturę i rozwój rozwiązania Pracę z technologiami: Kafka, Confluent, AWS, MSK, EKS, Terraform i CI/CD Współpracę z doświadczonym zespołem inżynierskim Dużą przestrzeń na rozwój kompetencji w obszarze Cloud, Data Platform i Kafka Zainteresowany? Jeśli Kafka i Confluent to Twoje mocne strony , a praca przy budowie hybrydowej platformy danych brzmi ciekawie – aplikuj. Nie musisz spełniać 100% wymagań. Najważniejsze są dla nas doświadczenie z Kafka/Confluent, samodzielność i chęć pracy przy ciekawym projekcie.

Daily tasks

• Projektowanie i rozwój hybrydowej architektury Kafka on-premise ↔ AWS
• Budowa i konfiguracja klastrów Kafka, MSK oraz środowisk Confluent Cloud
• Implementacja replikacji danych pomiędzy klastrami z wykorzystaniem MirrorMaker 2, Cluster Linking lub Replicator
• Konfiguracja komponentów Confluent, m.in. Schema Registry, Flink, Control Center i Tableflow
• Tworzenie infrastruktury AWS z wykorzystaniem Terraform
• Budowa i rozwój pipeline’ów CI/CD
• Automatyzacja wdrożeń i testów integracyjnych
• Konfiguracja monitoringu i observability
• Optymalizacja wydajności, niezawodności i opóźnień środowiska Kafka
• Udział w rozwiązywaniu incydentów i tworzeniu runbooków
• Współpraca z zespołami Data Engineering, DevOps i Security
• Dzielenie się wiedzą i mentoring mniej doświadczonych członków zespołu

Requirements

Minimum 4 lata doświadczenia z Apache Kafka Bardzo dobra znajomość Confluent Platform i Confluent Cloud Praktyczne doświadczenie z MirrorMaker 2, Cluster Linking lub Confluent Replicator Doświadczenie w budowie lub utrzymaniu środowisk hybrydowych on-premise / AWS Znajomość AWS, w szczególności VPC, IAM, EC2, EKS, MSK, S3, KMS i Secrets Manager Znajomość Terraform i podejścia Infrastructure-as-Code Doświadczenie z GitHub Actions, GitLab CI lub Jenkins Znajomość Python, Bash lub Ansible Doświadczenie z Prometheus i Grafana Znajomość bezpieczeństwa Kafka: TLS, SASL, ACL, RBAC Umiejętność samodzielnego rozwiązywania problemów i optymalizacji środowisk produkcyjnych Mile widziane: doświadczenie z Kubernetes/EKS, Schema Registry, Flink, Confluent Control Center, OpenTelemetry, Elastic Stack oraz automatyzacją testów integracyjnych Kafka.

Must have: Apache Kafka, AWS, VPC, IAM, AWS EC2, Amazon EKS, MSK, AWS S3, KMS, Terraform, GitHub Actions, GitLab CI, Python, Bash, Prometheus, TLS, ACL

Nice to have: Kubernetes, Flink, Kafka