Senior Data Engineer with Fabric[M/F]
Wymagane:PythonAzureData
Daily tasks
- Projektowanie, budowa i rozwój procesów ETL/ELT służących integracji oraz transformacji danych pochodzących z różnych źródeł.
- Tworzenie i optymalizacja hurtowni danych oraz modeli danych na potrzeby raportowania i analityki biznesowej.
- Rozwijanie rozwiązań Data Engineering w środowisku Microsoft Azure, z wykorzystaniem m.in. Microsoft Fabric, Azure Data Factory, Databricks i Synapse Analytics.
- Projektowanie wydajnych i skalowalnych przepływów danych oraz optymalizacja istniejących procesów.
- Współpraca z architektami i zespołami projektowymi przy opracowywaniu rozwiązań dopasowanych do potrzeb klientów.
- Wsparcie analityków BI w przygotowywaniu struktur i modeli danych wykorzystywanych w raportowaniu.
- Monitorowanie jakości, spójności i wydajności przetwarzanych danych.
- Udział w analizie wymagań biznesowych oraz rekomendowanie odpowiednich rozwiązań technologicznych.
Requirements
- Minimum 5 lat doświadczenia komercyjnego w obszarze Data Engineering, w tym doświadczenie w realizacji projektów dla klientów w modelu konsultingowym.
- Praktyczna znajomość ekosystemu Microsoft Azure, w szczególności Azure Data Factory, Azure SQL Database oraz Synapse Analytics.
- Doświadczenie w pracy z Microsoft Fabric i Databricks.
- Bardzo dobra znajomość SQL oraz zagadnień związanych z projektowaniem hurtowni danych.
- Znajomość modelowania danych, w tym modeli relacyjnych i wielowymiarowych.
- Umiejętność samodzielnego projektowania, rozwijania i optymalizacji procesów przetwarzania danych.
- Doświadczenie w analizowaniu problemów wydajnościowych oraz usprawnianiu istniejących rozwiązań.
- Umiejętność współpracy z zespołami technicznymi, analitykami i interesariuszami biznesowymi.
- Samodzielność, proaktywność oraz nastawienie na dostarczanie rozwiązań odpowiadających na potrzeby klienta.
- Bardzo dobra znajomość języka polskiego i angielskiego.
Certyfikaty
Wymagany minimum jeden z poniższych certyfikatów lub ukończonych szkoleń certyfikacyjnych:
- Microsoft Certified: Azure Data Engineer Associate
- Microsoft Certified: Fabric Analytics Engineer Associate
- Databricks Certified Data Engineer Associate / Professional
- Snowflake SnowPro Core Certification
- Implementing a Data Warehouse
- Analyzing and Visualizing Data with Power BI
Mile widziane
- Doświadczenie w pracy z Power BI, w szczególności w zakresie modelowania danych i przygotowywania warstwy raportowej.
- Znajomość platformy Snowflake.
- Doświadczenie w projektowaniu architektury rozwiązań danych oraz podejmowaniu decyzji technologicznych.
- Znajomość Pythona i jego zastosowań w przetwarzaniu danych.
- Doświadczenie w realizacji złożonych projektów transformacji lub modernizacji platform danych.
Must have: Python, Fabric, SQL, Azure Data Factory, Azure Databricks
Nice to have: PowerBI