Senior Data Engineer (GCP)
Cześć! Poznaj możliwości współpracy ze Scalo!
W Scalo zajmujemy się dostarczaniem projektów software'owych i wspieraniem naszych partnerów w rozwijaniu ich biznesu. Tworzymy oprogramowanie, które umożliwia ludziom dokonywanie zmian, działanie w szybszym tempie oraz osiąganie lepszych rezultatów. Wykorzystujemy szerokie spektrum usług IT, aby wspierać naszych klientów w realizacji ich celów biznesowych.
Obszary naszej działalności obejmują m.in.:
doradztwo technologiczne, tworzenie oprogramowania, systemy wbudowane, rozwiązania chmurowe, zarządzanie danymi, dedykowane zespoły projektowe.
Co oferujemy w ramach współpracy?
możliwość świadczenia usług w różnorodnych projektach z obszaru Software, Embedded, Data i Cloud Services,
zaangażowanie w dodatkowe inicjatywy presealsowe oraz eksperckie ,
dostęp do opieki medycznej, karty sportowej oraz platformy kafeteryjnej zgodnie z obowiązującymi zasadami współpracy.
Daily tasks
- rozwój i utrzymanie rozwiązań do przetwarzania danych w środowisku Google Cloud Platform (GCP),
- projektowanie i tworzenie potoków danych typu batch i streaming,
- wykorzystanie usług BigQuery, Dataflow, Dataproc, Composer (Airflow) oraz Cloud Storage,
- rozwój komponentów i aplikacji w Pythonie oraz SQL,
- budowę i optymalizację struktur danych wspierających analitykę i raportowanie,
- automatyzację procesów wdrożeniowych z wykorzystaniem Terraform i GitHub,
- zarządzanie artefaktami aplikacyjnymi przy wykorzystaniu Google Artifact Registry,
- testowanie, monitorowanie oraz utrzymanie rozwijanych rozwiązań,
- współpracę z analitykami, architektami i zespołami projektowymi przy realizacji wymagań biznesowych,
- aktywny udział w dyskusjach dotyczących architektury oraz długofalowego rozwoju platformy danych,
- świadczenie usług w modelu hybrydowym z Warszawy,
- stawkę do 160 PLN/h NET + VAT na B2B.
Requirements
Kompetencje wymagane do realizacji usług:
doświadczenie w projektowaniu i budowie rozwiązań chmurowych w Google Cloud Platform (GCP),
praktyczne doświadczenie w projektowaniu i implementacji systemów przetwarzania danych oraz integracji systemów,
bardzo dobra znajomość BigQuery, Dataproc, Composer (Airflow) oraz Cloud Storage,
bardzo dobra znajomość Python i SQL, pozwalająca na samodzielne tworzenie i rozwój aplikacji oraz komponentów integracyjnych,
doświadczenie w pracy z potokami danych i procesami ich przetwarzania,
znajomość GitHub oraz doświadczenie w pracy z repozytoriami kodu,
doświadczenie z Google Artifact Registry,
umiejętność samodzielnej realizacji zadań przy jednoczesnej współpracy z zespołem,
umiejętność pracy zgodnie z przyjętymi standardami technicznymi i architektonicznymi,
komunikatywność, otwartość na wymianę wiedzy oraz umiejętność uwzględniania potrzeb biznesowych podczas projektowania rozwiązań.
Must have: Google Cloud Platform, GCP, BigQuery, Airflow, Cloud, Storage, Python, SQL, CA, GitHub