[Job-31065] Engenheiro de Dados Sênior , Brazil
Na CI&T , ajudamos grandes empresas a transformar o potencial da AI em impacto real nos negócios com AI Deployment, execução AI-native e tech-integrated business solutions. Com 30 anos de experiência em transformação tecnológica, aceleramos inovação com expertise em agentic SDLC, application modernization, Data & AI, martech e business strategy. Somos 8.000 CI&Ters em mais de 25 países, colaborando para construir soluções com impacto real. AI já faz parte da forma como trabalhamos, evoluímos e inovamos todos os dias. Importante: se você reside na Região Metropolitana de Campinas, sua presença nos escritórios da cidade será obrigatória, conforme a política de frequencia vigente.
Estamos em busca de uma pessoa para atuar como Engenheiro(a) de Dados, para integrar um projeto estratégico, apoiando a evolução e modernização de processos de dados relacionados ao Poder Público.
O principal desafio será atuar sobre processos que foram migrados de tecnologias legadas, como SAS, Hive e Teradata, realizando ajustes, evoluções e otimizações no ambiente atual baseado em Databricks e PySpark, garantindo qualidade técnica, performance e aderência às boas práticas de desenvolvimento
Responsabilidades:
-Desenvolver, ajustar e evoluir pipelines de dados utilizando Databricks e PySpark; -Analisar processos previamente migrados de ambientes legados e realizar os ajustes necessários; -Identificar gargalos e implementar melhorias de performance e otimização em pipelines e processamento de grandes volumes de dados; -Desenvolver soluções utilizando Python e PySpark; -Trabalhar com arquitetura medalhão (Bronze, Silver e Gold) no Databricks; -Aplicar boas práticas de Engenharia de Software, garantindo código organizado, sustentável e de fácil manutenção; -Analisar regras e processos anteriormente implementados em SAS, Hive e Teradata, apoiando sua modernização; -Utilizar Git para versionamento e colaboração no desenvolvimento; -Atuar de forma autônoma na investigação e resolução de problemas técnicos; -Colaborar com times técnicos e áreas envolvidas para entendimento das regras existentes e evolução das soluções.
Requisitos Técnicos:
-Experiência sólida com Databricks; -Experiência avançada com PySpark; -Experiência com Python aplicado à Engenharia de Dados; -Conhecimento e experiência prática com Git; -Experiência na construção, manutenção e evolução de pipelines de dados; -Experiência com otimização e performance de processamento de dados; -Conhecimento de arquitetura medalhão; -Experiência com ambientes de dados em Microsoft Azure; -Conhecimento de boas práticas de desenvolvimento de software; -Capacidade de atuar com autonomia em ambientes complexos de dados.
Diferenciais:
-Experiência ou conhecimento em SAS; -Experiência ou conhecimento em Hive; -Experiência ou conhecimento em Teradata;
- Vivência em projetos de migração e modernização de plataformas de dados legadas;
-Experiência com processos de dados de grande volume e alta complexidade.
#LI-PA1
Nossos benefícios:
- Plano de saúde e odontológico;
- Vale alimentação e refeição;
- Auxílio-creche;
- Licença parental estendida;
- Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;
- Participação nos Lucros e Resultados (PLR);
- Seguro de Vida;
- Plataforma de aprendizagem contínua (CI&T University);
- Clube de descontos;
- Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;
- Curso gestante e parentalidade responsável;
- Parceria com plataformas de cursos online;
- Plataforma para aprendizagem de idiomas;
- E muitos outros
Mais detalhes sobre os nossos benefícios aqui: https://ciandt.com/br/pt-br/carreiras
Na CI&T, a inclusão começa no primeiro contato. Se você é pessoa com deficiência, é importante apresentar o seu laudo durante o processo seletivo. Consulte quais dados são necessários conter no laudo clicando aqui. Assim, podemos garantir o suporte e as adaptações que você merece. Se ainda não tem o laudo caracterizador, não se preocupe: podemos te apoiar para obtê-lo.
Temos um time dedicado de Saúde e Bem-estar, especialistas em inclusão e grupos de afinidade que estarão com você em todas as etapas. Conte com a gente para fazer essa jornada lado a lado.