Data Engineer (Azure & Databricks)

Miejsce pracy: 100% zdalnie

Start: ASAP (max. 14 dni wypowiedzenia)

Współpraca: B2B z ITFS

Wynagrodzenie: 150-170 zł/h + VAT (bez płatnych urlopów)

Projekt: budowa i wdrożenie rozwiązania wspierającego Group Reporting dla Solvency II , obejmującego procesy kalkulacyjne i raportowe, jak i rozwiązania związane z raportowaniem regulacyjnym. Data Engineer będzie zaangażowany w development oraz w konfigurację środowiska Azure oraz wdrożenie i konfigurację Databricks.

Branża: ubezpieczenia w UK

ID: P3640

Daily tasks

• Konfiguracja i przygotowanie środowiska Azure oraz Databricks pod potrzeby projektu
• Wdrożenie oraz konfiguracja Databricks w istniejącej infrastrukturze Azure
• Projektowanie i budowanie procesów data ingestion oraz data integration
• Budowa i rozwój modeli danych wykorzystywanych w procesach raportowych
• Projektowanie i wdrażanie pipeline'ów danych oraz procesów ETL/ELT
• Rozwój rozwiązań i prac programistycznych w środowisku Databricks
• Współpraca przy wdrożeniu procesów w obszarze Solvency II (Pillar 1 i Pillar 3)
• Wsparcie w konfiguracji i integracji platformy CCH Tagetik z Databricks
• Implementacja kalkulacji, mapowań danych, reguł biznesowych oraz modeli
• Przygotowywanie danych pod raportowanie MI/BI oraz regulatory reporting
• Tworzenie i utrzymywanie mechanizmów kontroli jakości i poprawności danych
• Udział w testach SIT, UAT, testach regresyjnych oraz E2E
• Rozwiązywanie problemów technicznych związanych z pipeline'ami, danymi i środowiskiem
• Współpraca z Data Architectem przy szczegółowym projektowaniu architektury technicznej
• Współpraca z zespołem Klienta oraz innymi członkami zespołu projektowego

Requirements

Min. 5-letnie doświadczenie na stanowisku Data Engineer

Praktyczne, projektowe doświadczenie w pracy z Databricks

Doświadczenie w pracy z chmurą Microsoft Azure

Doświadczenie w konfiguracji oraz wdrażaniu rozwiązań danych i chmurowych w Azure

Praktyczna znajomość procesów ETL/ELT , data ingestion i data integration

Doświadczenie w budowaniu pipeline'ów danych

Znajomość modelowania danych i pracy z dużymi zbiorami danych

Umiejętność pracy z rozwiązaniami chmurowymi w środowiskach produkcyjnych

Bardzo dobra znajomość języka angielskiego (poziom min. B2/C1 )

Mile widziane:

Doświadczenie w branży ubezpieczeniowej lub finansowej

Znajomość obszaru Solvency II (w szczególności Pillar 1 i/lub Pillar 3)

Doświadczenie z CCH Tagetik

Znajomość zagadnień regulatory reporting

Doświadczenie w projektach z wdrażaniem Databricks od podstaw

Doświadczenie w konfiguracji środowisk Azure i deploymentach Databricks

Znajomość narzędzi oraz praktyk CI/CD , IaC i DevOps w środowisku Azure

Doświadczenie we współpracy z Data Architectem oraz udział w pracach nad solution i technical design

Must have: Databricks, Microsoft Azure, ETL, Data engineering, Azure

Nice to have: IaC, DevOps, Tagetik