Data Platform Engineer - Vaga Afirmativa para Mulheres
Modelo de trabalho đ Modelo de trabalho 100% remoto
Sobre o time:
O Time de Dados Ă© o alicerce estratĂ©gico que transforma dados brutos em inteligĂȘncia competitiva. Atuamos na fronteira entre tecnologia e negĂłcio, garantindo que a informação seja confiĂĄvel, acessĂvel e performĂĄtica e, agora, a fundação de dados para a nossa prĂłxima fronteira: a inteligĂȘncia artificial generativa aplicada ao negĂłcio. Nosso desafio Ă© construir uma camada de dados robusta que sirva de combustĂvel para que os times de Analytics e Data Science extraiam o mĂĄximo valor da nossa plataforma, suportando o crescimento acelerado da companhia com governança e eficiĂȘncia.
Desafios da posição:
Sua missĂŁo serĂĄ ser a referĂȘncia tĂ©cnica em engenharia de dados dentro da GCP, responsĂĄvel pela espinha dorsal que sustenta todo o consumo analĂtico da empresa. VocĂȘ vai arquitetar e implementar pipelines de ingestĂŁo e processamento â batch e near real time â sobre BigQuery, definindo os padrĂ”es de orquestração, versionamento e infraestrutura como cĂłdigo que o restante do time passa a seguir. NĂŁo se trata apenas de entregar pipelines: Ă© desenhar as fundaçÔes, os contratos de dados e as ferramentas internas que tornam cada nova fonte e cada novo caso de uso mais barato de construir do que o anterior.
O desafio central Ă© elevar a maturidade da nossa plataforma de dados e preparar o terreno para a nossa estratĂ©gia de IA, garantindo confiabilidade, observabilidade e previsibilidade de custo em escala. VocĂȘ vai construir a camada de base sobre a qual analytics engineers, cientistas de dados e agentes de IA operam com autonomia â com linhagem rastreĂĄvel, frescor monitorado e acesso governado. Ao final, seja um dashboard, um modelo ou um agente autĂŽnomo consumindo os dados, a fonte da informação serĂĄ Ășnica, performĂĄtica e confiĂĄvel.
Responsabilidades e atribuiçÔes
Seu dia a dia na Conta Simples:
- Arquitetar e manter a plataforma de dados na GCP, definindo os padrĂ”es de ingestĂŁo, processamento e orquestração que sustentam todo o consumo analĂtico da empresa â de dashboards a agentes de IA.
- Construir e evoluir pipelines de ingestão batch e near real time a partir de bancos transacionais, APIs e eventos, garantindo que novas fontes entrem no BigQuery de forma padronizada e com esforço decrescente.
- Estabelecer contratos de dados e governança de schema, protegendo as camadas de consumo de quebras em upstream e tornando explĂcito o acordo entre quem produz e quem consome dados.
- Implementar observabilidade de dados ponta a ponta â linhagem, frescor, volume e alertas â, para que falhas sejam detectadas pelo time antes de chegarem ao negĂłcio.
- Tratar infraestrutura como produto, versionando recursos em Terraform, mantendo pipelines de CI/CD e reduzindo o caminho entre uma ideia e um dado disponĂvel em produção.
- Otimizar performance e custo no BigQuery em escala, definindo estratégias de particionamento, clusterização, reservas e monitoramento de consumo para que o crescimento da empresa não vire crescimento proporcional de custo.
- Garantir segurança e privacidade dos dados, implementando controles de acesso, mascaramento e polĂticas de retenção compatĂveis com um ambiente financeiro regulado.
- Atuar como referĂȘncia tĂ©cnica e mentor do time, conduzindo decisĂ”es de arquitetura, revisĂ”es de cĂłdigo e a disseminação de boas prĂĄticas de engenharia aplicadas a dados.
- Colaborar diretamente com Analytics Engineering e Data Science, oferecendo a base e as ferramentas para que essas pessoas trabalhem com autonomia, sem depender de vocĂȘ para cada nova entrega.
Requisitos e qualificaçÔes
O que esperamos de vocĂȘ:
- Senioridade tĂ©cnica para tomar decisĂ”es de arquitetura com trade-offs explĂcitos e influenciar times alĂ©m do seu prĂłprio.
- DomĂnio em SQL: capacidade de escrever e depurar queries complexas, performĂĄticas e legĂveis.
- ExperiĂȘncia sĂłlida em Python aplicado a dados: construção de pipelines, integraçÔes com APIs e ferramentas internas â com testes e cĂłdigo de qualidade de produção.
- Ecossistema GCP: vivĂȘncia prĂĄtica com BigQuery, Cloud Storage, Pub/Sub e serviços de processamento (Dataflow, Dataproc ou equivalentes).
- Orquestração: experiĂȘncia com Airflow/Cloud Composer, incluindo idempotĂȘncia, backfills e gestĂŁo de dependĂȘncias.
- Infraestrutura como cĂłdigo e cultura de engenharia: Terraform, Git/GitHub, CI/CD e Code Review como prĂĄtica cotidiana.
- Modelagem de dados: entendimento de Data Warehousing e modelagem dimensional o suficiente para desenhar camadas que sirvam bem a quem consome.
- ExperiĂȘncia com Dataform ou dbt e com o ciclo de vida de transformaçÔes versionadas.
- Confiabilidade e qualidade: prĂĄtica em testes automatizados de dados, monitoramento e resposta a incidentes.
SerĂĄ diferencial se vocĂȘ tiver:
- ExperiĂȘncia com processamento em streaming (Pub/Sub, Dataflow, Kafka ou Flink) em cenĂĄrios de baixa latĂȘncia.
- VivĂȘncia com arquiteturas modernas de plataforma de dados: data mesh, catĂĄlogo e discovery, self-service para times de negĂłcio.
- Conhecimento de arquitetura de dados para RAG (Retrieval-Augmented Generation): estruturação de dados e metadados para otimizar a recuperação e o contexto de informaçÔes por LLMs.
- ExperiĂȘncia com Kubernetes, containers e prĂĄticas de SRE aplicadas a pipelines de dados.
- VivĂȘncia no setor financeiro ou fintechs, incluindo requisitos de compliance e auditoria.
InformaçÔes adicionais
DĂĄ uma olhada (em alguns) dos benefĂcios de ser Simpler:
- đ„ Plano de saĂșde (amplitude nacional) sem custo de mensalidade e coparticipação para os nossos #Simplers e atĂ© +2 dependentes legais
- đŠ· Plano odontolĂłgico (amplitude nacional) sem custo de mensalidade e coparticipação para os nossos #Simplers e atĂ© +2 dependentes legais
- đ Flex food no cartĂŁo Ifood BenefĂcios
- đ» AuxĂlio home office no cartĂŁo Ifood BenefĂcios
- đȘ Wellhub extensivo a dependentes legais (filho(a)s e cĂŽnjuges)
- đ Birthday-off (para vocĂȘ curtir o seu dia com quem vocĂȘ ama!)
- đ Parceria com InstituiçÔes Educacionais
- đ§ Zenklub (SaĂșde Mental) - Plataforma de saĂșde mental com 04 sessĂ”es de terapia gratuitas por mĂȘs para todo Simpler
- đ Seguro de vida
- đ¶ Licença parental estendida (maternidade 180 dias e paternidade 45 dias), vĂĄlida tambĂ©m para mĂŁes e pais adotantes, com as mesmas regras aplicadas a nĂŁo adotantes
- đ AuxĂlio Creche - Para filhos de atĂ© 1 ano de idade
- âïž Onhappy (Viagens) - BenefĂcio de viagens com descontos exclusivos em hotĂ©is, passagens e experiĂȘncias para vocĂȘ viajar melhor e mais
- đŸ Guapeco (SaĂșde Pet) - Parceria de saĂșde pet com condiçÔes especiais para vocĂȘ cuidar do seu melhor amigo, no modelo de adesĂŁo individual