Cloudera Solution Architect (AWS) [M/F]
Projekt realizowany jest dla międzynarodowej instytucji finansowej i koncentruje się na rozwoju nowoczesnej platformy danych opartej o Cloudera CDP w środowisku AWS. Celem projektu jest projektowanie oraz rozwój skalowalnych rozwiązań Data Lake i Operational Data Store, wspierających przetwarzanie dużych wolumenów danych oraz procesy analityczne i biznesowe. Zespół pracuje w środowisku Agile, wykorzystując nowoczesne technologie Big Data oraz rozwiązania chmurowe do budowy bezpiecznej i wydajnej architektury danych.
Daily tasks
- projektowanie kompleksowych rozwiązań Data Lake oraz Operational Data Store (ODS) opartych o Cloudera na AWS,
- tworzenie architektury rozwiązań dla dużych, rozproszonych środowisk danych,
- odpowiedzialność za projektowanie rozwiązań end-to-end zgodnie z wymaganiami biznesowymi oraz standardami architektonicznymi,
- współpraca z interesariuszami biznesowymi oraz zespołami technicznymi przy doprecyzowywaniu wymagań,
- weryfikacja projektów przygotowywanych przez innych architektów i zespoły techniczne,
- definiowanie najlepszych praktyk w zakresie architektury danych oraz wspieranie ich wdrażania,
- wsparcie procesu estymacji oraz identyfikacja ryzyk technicznych,
- nadzór nad zgodnością rozwiązań z architekturą korporacyjną,
- współpraca z zespołami odpowiedzialnymi za development, integrację, testy i wdrożenia.
Requirements
min. 7 lat doświadczenia w projektach związanych z architekturą danych oraz rozwiązaniami chmurowymi, bardzo dobra znajomość platform Cloudera CDH/CDP (On-Premise oraz Cloud), doświadczenie w projektowaniu rozwiązań opartych o AWS, praktyczna znajomość technologii Big Data, w szczególności: Apache Spark, Kafka, Cassandra, HBase, doświadczenie w budowie procesów ETL oraz Data Pipeline z wykorzystaniem narzędzi takich jak Apache Airflow, Apache NiFi, zaawansowana znajomość j. angielskiego, dobra znajomość zasad architektury danych oraz nowoczesnych praktyk inżynierskich.
Must have: AWS, Cloudera