Data Engineer

Wspólnie z naszym Partnerem, szwedzkim koncernem energetycznym będącym jednym z największych producentów i dystrybutorów energii w Europie , poszukujemy doświadczonego/ej specjalisty/ki do świadczenia usług jako Data Engineer. Projekt dotyczy budowy i utrzymania platformy danych zasilającej inteligentnych agentów AI automatyzujących procesy SOC w oparciu o Azure Data Explorer i Microsoft Sentinel.

OFERUJEMY: Nowy sposób na aplikowanie z AI Rekruterem (AIR) – w trakcie procesu możesz porozmawiać z wirtualnym rekruterem 24/7, bez czekania na telefon. Finalną decyzję zawsze podejmuje Opiekun Projektu. Współpracę w modelu projektowym, z rozliczeniem opartym na etapach i protokołach odbioru poszczególnych deliverables. Wsparcie po stronie Connectis w sprawach administracyjnych i rozliczeniowych związanych ze współpracą. Uczestnictwo w wydarzeniach branżowych oraz meetupach technologicznych. 5 000 PLN za polecenie znajomych do naszych projektów. Elastyczna forma współpracy B2B. Realizacja usług 100% zdalnie. Szybki i zdalny proces.

Dziękujemy za wszystkie zgłoszenia. Pragniemy poinformować, że skontaktujemy się z wybranymi osobami.

Daily tasks

• Projektowanie i budowanie pipeline'ów ingestion danych w Azure Data Explorer, obejmujące normalizację i definiowanie schematów danych zasilających agentów AI.
• Pisanie i optymalizowanie zapytań KQL wykorzystywanych przez agentów do wzbogacania alertów, korelacji zdarzeń i threat huntingu.
• Diagnozowanie błędów po stronie danych i integracji oraz rozszerzanie istniejących integracji o nowe źródła i API.
• Onboarding nowych źródeł logów do Sentinel i ADX wraz z bieżącą walidacją jakości danych na wejściu.
• Konfigurowanie przepływów integracyjnych w Logic Apps oraz routing i transformacja danych w Cribl.
• Tworzenie skryptów Python do automatyzacji zadań pipeline'owych i wywołań API między systemami.

Requirements

Minimum 4-letnie doświadczenie komercyjne na stanowisku Data Engineer. Znajomość ekosystemu Microsoft Azure , w tym Microsoft Defender i Entra ID . Ogólna wiedza z zakresu IT security oraz znajomość podstaw sieciowych TCP/IP . Doświadczenie w pracy z SQL i Python w kontekście pipeline'ów danych. Silna, praktyczna znajomość KQL oraz Azure Data Explorer ( ADX ). Bardzo dobra znajomość języka angielskiego. Biegła znajomość języka polskiego.

Mile widziane:

Doświadczenie w budowie warstw raportowych w SQL na potrzeby dashboardów i agentów analitycznych. Doświadczenie w projektowaniu i implementacji integracji API-based oraz znajomość metod autentykacji. Znajomość Logic Apps i doświadczenie w konfigurowaniu przepływów integracyjnych. Doświadczenie z narzędziem Cribl w zakresie routingu i transformacji danych.

Must have: Azure, KQL, Azure Data Explorer, SQL, Python, REST API, JSON, Defender, TCP/IP, Microsoft Entra ID