Senior Data Engineer

Wspólnie z naszym Partnerem Biznesowym poszukujemy doświadczonego specjalisty do świadczenia usług jako Senior Data Engineer. Projekt obejmuje rozwój i automatyzację narzędzi w obszarze Data Platform oraz wsparcie zespołów produktowych, technicznych i analitycznych Zamawiającego w budowaniu rozwiązań technologicznych i usług opartych o dane.

Nowy sposób na aplikowanie z AI Rekruterem (AIR) – w trakcie procesu możesz porozmawiać z wirtualnym rekruterem 24/7, bez czekania na telefon. Finalną decyzję zawsze podejmuje Opiekun Projektu. Współpracę w modelu projektowym, z rozliczeniem opartym na etapach i protokołach odbioru poszczególnych deliverables. Wsparcie po stronie Connectis w sprawach administracyjnych i rozliczeniowych związanych ze współpracą. Uczestnictwo w wydarzeniach branżowych oraz meetupach technologicznych. 5 000 PLN za polecenie znajomych do naszych projektów. Elastyczną formę współpracy B2B przy stabilnym, długoterminowym projekcie u dużego partnera Microsoft w Polsce. Szybki i zdalny proces.

Daily tasks

• Rozwój i automatyzacja narzędzi w obszarze Data Platform.
• Wsparcie zespołów produktowych, technicznych i analitycznych Zamawiającego w budowaniu produktów i usług opartych o dane.
• Rozwiązywanie zgłoszeń technicznych napływających kanałami komunikacji wykorzystywanymi w organizacji (Slack, e-mail, OpsGenie).
• Zapewnienie okazjonalnej gotowości technicznej w zakresie reagowania na incydenty.

Requirements

• Programowanie w Pythonie (ok. 65% zadań) oraz w językach JVM: Java, Kotlin, Scala (ok. 35% zadań).

• Znajomość Google Cloud Platform (BigQuery, Composer, Dataproc, Cloud Run) lub innego publicznego dostawcy chmury.

• Zaawansowana znajomość SQL oraz PySpark.

• Stosowanie dobrych praktyk wytwarzania oprogramowania: TDD, Clean Code, CI/CD.

• Sprawne poruszanie się w środowisku Linux/Unix.

• Doświadczenie w pracy z Dockerem.

• Znajomość gita lub innego systemu kontroli wersji.

• Zainteresowanie nowymi technologiami, w tym Generative AI i jej zastosowaniami.

Mile widziane:

• Znajomość Apache Beam i Google Dataflow.

• Znajomość Terraform lub innych narzędzi IaC.

• Doświadczenie w Sparku / PySparku, niekoniecznie w środowisku Hadoop.

Must have: Python, Java, Kotlin, Scala, Google cloud platform, SQL, PySpark, TDD, Clean Code, CI/CD, Linux, Docker, Git, AI

Nice to have: Apache Beam, google dataflow, Terraform, IaC, Spark