Data Engineer spark scala confirmé - Freelance (H/F)
Indispensable :PythonGitAWSDataScrumSenior
Nous recherchons un Data Engineer confirmé / senior (5 ans d'expérience minimum) pour le Data Office d'une entreprise du secteur des jeux au sein de l'équipe Core Data. Le poste est mi-run, mi-build : maintien en conditions opérationnelles d'un datalake AWS et développement de pipelines de transformation en grande volumétrie.
MISSIONS
- Maintien en conditions opérationnelles d'un datalake AWS
- Développement de pipelines de transformation de données à grande volumétrie
STACK TECHNIQUE
- Spark en Scala (maîtrise avancée, cœur du besoin)
- Python
- SQL
- AWS (S3, EMR, EKS, Lambda, Athena)
- GitLab / GitLab CI
- Maven
OUTILS COMPLÉMENTAIRES APPRÉCIÉS
- Dataiku (flows et webapp)
- Kafka / MSK
- Airflow
- Terraform
- Méthodologie Scrum/SAFe
QUALITÉS ATTENDUES
- Bon relationnel avec des interlocuteurs variés (métiers, techniques)
- Rigueur (documentation, traçabilité)
- Capacité à vulgariser
CONDITIONS DE TRAVAIL
- Secteur : paris et jeux
- Localisation : Paris
- 5 ans d'expérience minimum en Data Engineering
- Maîtrise avancée de Spark en Scala
- Compétences en Python, SQL et AWS (S3, EMR, EKS, Lambda, Athena)
- Maîtrise de GitLab / GitLab CI et Maven
- Un plus : connaissance de Dataiku (flows et webapp), Kafka / MSK, Airflow, Terraform, et méthodologie Scrum/SAFe
- Qualités relationnelles : bon relationnel avec interlocuteurs métiers et techniques
- Rigueur dans la documentation et la traçabilité
- Capacité à vulgariser