Mid / Senior Data Engineer (Python | Confluent Cloud | Kafka)
Nõutav:PythonGoogle CloudCloudData
Zakres obowiązków
- Projektowanie, wdrażanie i utrzymanie strumieniowych rurociągów danych (Data Pipelines) w oparciu o Apache Kafka oraz Confluent Cloud.
- Integracja rozproszonych systemów i źródeł danych z wykorzystaniem podejścia Event-driven Architecture.
- Tworzenie i optymalizacja kodu w języku Python oraz skomplikowanych zapytania/skryptów SQL.
- Konfiguracja i obsługa procesów przechwytywania zmian w bazach danych (CDC Tools).
- Współpraca przy integracji rozwiązań chmurowych (GCP) oraz nierelacyjnych baz danych (MongoDB).
- Dbanie o wysoką wydajność, niezawodność oraz skalowalność architektury przepływu danych
Wymagania
- Confluent Cloud (kluczowe – mile widziany certyfikat, ale nie jest on warunkiem koniecznym)
- Kafka (praktyczna znajomość i doświadczenie komercyjne)
- Bardzo dobra znajomość Pythona
- Bardzo dobra znajomość języka SQL
- Angielski na poziomie swobodnej komunikacji w mowie i piśmie (B2+)
- Znajomość wzorców Event-driven Architecture
- Doświadczenie z narzędziami CDC (Change Data Capture)
- Znajomość chmury GCP (Google Cloud Platform)
- Doświadczenie w pracy z MongoDB
Must have: Python, Cloud, Kafka, SQL
Nice to have: GCP, Google Cloud Platform, MongoDB
Oferujemy
Stawka (ustalana indywidualnie):140 - 155 PLN netto + VAT / h*
Pozostałe
Szukamy doświadczonego Data Engineera, który wzmocni nasz zespół w obszarze przetwarzania danych w czasie rzeczywistym i architektury opartej na zdarzeniach. · Warunki zaangażowania · Obszar: Consulting IT · Lokalizacja: 100% zdalnie *Delegacje: nie Start:** ASAP (akceptujemy kandydatury z max 1msc dostępnością do startu)
Zaangażowanie: B2B (outsourcing z 1dea), full-time, długofalowo (6msc + przedłużenie)