Data Engineer

O firmie

Opis projektu Dołącz do strategicznego projektu transformacji danych realizowanego dla dużej polskiej firmy z sektora telekomunikacyjnego.

Zakres obowiązków

Projekt obejmuje migrację środowisk analitycznych z infrastruktury on-premise do Google Cloud Platform (GCP) oraz budowa nowoczesnej platformy danych wspierającej procesy biznesowe, analitykę i przyszłe wykorzystanie rozwiązań AI/LLM.

W tej roli będziesz odpowiadać za rozwój i wdrażanie procesów Data Governance w środowisku GCP, w tym zarządzanie metadanymi, katalogowanie danych, zapewnienie jakości danych oraz wdrażanie standardów dostępu i odpowiedzialności za dane. Będziesz współpracować z zespołami Data Engineering, BI oraz biznesowymi właścicielami danych.

• Projektowanie i wdrażanie procesów oraz standardów Data Governance w środowisku GCP.
• Budowa i rozwój katalogu danych oraz zarządzanie metadanymi.
• Definiowanie modeli metadanych, struktur katalogu danych i relacji między obiektami.
• Wdrażanie mechanizmów Data Lineage, Data Quality i Data Ownership.
• Tworzenie oraz egzekwowanie standardów i polityk zarządzania dostępem do danych.
• Współpraca z zespołami Data Engineering, BI oraz właścicielami danych biznesowych.
• Wspieranie użytkowników biznesowych w wyszukiwaniu, rozumieniu i wykorzystywaniu danych.
• Udział w definiowaniu i wdrażaniu Data Contracts oraz standardów wymiany danych.
• Przygotowywanie dokumentacji technicznej, procesów, standardów i modeli danych.

Wymagania

Must have

• 3–5 lat doświadczenia w środowisku GCP na stanowisku Data Engineer lub Data Governance Engineer.
• 3–5 lat doświadczenia w obszarze Data Governance, Data Management lub Data Quality.
• Praktyczna znajomość GCP- szczególnie w kontekście BigQuery, Dataplex i Data Catalog.
• Zaawansowana znajomość SQL, poparta doświadczeniem zawodowym, w tym optymalizacja zapytań, tworzenie agregacji i zarządzanie indeksami.
• Doświadczenie w modelowaniu danych oraz pracy z metadanymi.
• Znajomość zagadnień Data Lineage, Data Quality, Data Stewardship i Data Ownership.
• Doświadczenie w przygotowywaniu dokumentacji technicznej i code review.
• Umiejętność współpracy z zespołami biznesowymi, technicznymi i analitycznymi.
• Proaktywność, odpowiedzialność i nastawienie na jakość danych.
• Znajomość języka angielskiego na poziomie B1/B2.

Nice to have

• Znajomosc Apache Spark, Python
• Doswiadczenie z Kubernetes, Terraform
• Doswiadczenie z Looker
• Znajomosc Vertex AI
• Doswiadczenie w projektowaniu architektury danych
• Znajomosc przetwarzania danych w modelach Batch i Streaming
• Doswiadczenie z CI/CD oraz monitoringiem/SLO
• Zainteresowanie rozwiazaniami AI/LLM
• Doswiadczenie w projektach migracji srodowisk analitycznych do chmury

Must have: Google Cloud Platform, BigQuery, SQL

Nice to have:

• Apache Spark
• Python
• Kubernetes
• Terraform
• Looker
• Vertex AI
• CI/CD

Oferujemy

• Udział w strategicznym projekcie transformacji danych w dużej organizacji z sektora telekomunikacyjnego.
• Lokalizacja: Warszawa – model hybrydowy (możliwość pracy zdalnej)
• Stawka: do 155 PLN/h
• Start: ASAP

Aplikowanie

1. Screening CV
2. Rozmowa HR
3. Rozmowa z klientem