Data Engineer

• Dofinansowanie karty sportowej
• Stałe wsparcie konsultanta
• Program rekomendacji pracowników

Daily tasks

• Analiza wymagań biznesowych oraz współpraca z interesariuszami przy definiowaniu zakresu danych
• Projektowanie modelu danych dla data martu
• Budowa procesów integracyjnych i ETL zasilających dane z różnych źródeł (Oracle, SQL Server, Kafka, pliki JSON i TXT)
• Transformacja i mapowanie danych do docelowego modelu relacyjnego
• Przygotowanie algorytmów przetwarzających dane w formie wydajnych procedur składowanych
• Przygotowanie i utrzymanie warstwy danych wykorzystywanej przez raporty oraz dashboardy Power BI
• Diagnostyka i rozwiązywanie problemów związanych z przetwarzaniem danych oraz jakością danych
• Przygotowywanie dokumentacji technicznej

Requirements

• Gotowość do okazjonalnych wizyt w biurze w Katowicach
• Minimum 5 lat doświadczenia w pracy z Microsoft SQL Server, w tym projektowania, rozwoju i utrzymania baz danych
• Bardzo dobra znajomość T-SQL, obejmująca tworzenie procedur składowanych, funkcji, widoków oraz optymalizację wydajności zapytań
• Bardzo duże doświadczenie w pracy z SSIS (SQL Server Integration Services), w szczególności w budowie, utrzymaniu i diagnostyce procesów integracyjnych oraz ETL
• Doświadczenie w projektowaniu i budowie hurtowni danych oraz data martów
• Praktyczna umiejętność przetwarzania danych w formatach JSON, XML oraz plikach tekstowych, obejmująca parsowanie, walidację i transformację danych do modelu relacyjnego
• Doświadczenie w modelowaniu danych, obejmujące projektowanie modeli oraz optymalizację struktur danych na potrzeby raportowania i analiz
• Doświadczenie w integracji danych pochodzących z różnych źródeł, w szczególności z baz Oracle, Microsoft SQL Server, komunikatów Kafka oraz plików wymiany danych
• Umiejętność projektowania i implementacji procesów zasilania danych, obejmujących pozyskiwanie, transformację, walidację i udostępnianie danych
• Umiejętność samodzielnej współpracy z interesariuszami biznesowymi i technicznymi, obejmująca pozyskiwanie wymagań, doprecyzowywanie potrzeb, identyfikację brakujących informacji oraz przekładanie wymagań biznesowych na rozwiązania techniczne i modele danych
• Doświadczenie w diagnozowaniu i rozwiązywaniu problemów na środowiskach produkcyjnych
• Umiejętność tworzenia i utrzymywania dokumentacji technicznej dla rozwijanych rozwiązań

Mile widziane:

• Doświadczenie w zakresie wizualizacji i raportowania danych z wykorzystaniem SSRS oraz Power BI
• Znajomość rozwiązań opartych na Microsoft Fabric, w szczególności w obszarze integracji danych, analityki i raportowania

Must have: Python, MS SQL Server, T-SQL, SSIS, JSON, XML, ETL, Kafka, Oracle, Power BI

Nice to have: Fabric