Senior Data Engineer

O projekcie

Budujesz platformy danych dla klientów z sektora bankowego. Projektujesz hurtownie i rozwiązania w architekturze data lakehouse. Pilnujesz procesów ETL oraz ELT i przetwarzasz duże zbiory danych w Sparku i Kafce. Rozmawiasz z biznesem o tym, jakie pytania chce zadać danym, i przekładasz to na model.

Ideamotive

Czym jest Ideamotive?

• Agile’owa firma świadcząca usługi w zakresie tech team extension IT dla klienta korporacyjnego (głównie w Polsce).
• Nasza firma została uznana przez Forbes 3 lata z rzędu jako jedna z najprężniej rozwijających się organizacji IT w Polsce oraz znalazła się na liście Financial Times 1000.
• Team delivery składa się z 60 osób, core biznesowy z 12 osób i mamy chrapkę na wzrosty, więc podejście “can do” i nastawienie na działanie są tutaj niezbędne.
• Mamy bardzo zgrany, zaangażowany zespół, lubimy to, co robimy.
• Jeżeli taka atmosfera jest zgodna z Twoimi oczekiwaniami, zaaplikuj! Zobaczmy jaką historię możemy razem napisać.

Daily tasks

• Projektowanie i rozwój hurtowni oraz platform danych.
• Tworzenie i optymalizacja procesów ETL oraz ELT.
• Budowa rozwiązań w architekturze data lakehouse.
• Przetwarzanie dużych zbiorów danych w Sparku i Kafce.
• Przekładanie wymagań biznesowych na rozwiązania analityczne.
• Projektowanie architektury danych dla nowych projektów

Requirements

Nasze wymagania

• Minimum 5 lat komercyjnego doświadczenia na stanowisku data engineera.
• Biegłej znajomości SQL i umiejętności optymalizacji zapytań.
• Praktycznej wiedzy z budowy i utrzymania hurtowni danych.
• Doświadczenia ze Sparkiem i Kafką w środowisku produkcyjnym.
• Rozumienia koncepcji data lakehouse oraz procesów ETL i ELT.
• Pełnej samodzielności w realizacji zadań technicznych.

Must have: SQL, Data Lake, ETL, ELT, Spark, Kafka