Engenheiro de Dados Sênior (Foco Databricks)
Descrição
A Capgemini está procurando um Engenheiro de Dados com foco em Databricks para se juntar à sua equipa de Data & AI Consulting em Portugal. Nesta função, você será responsável por desenhar e implementar pipelines de dados escaláveis e soluções de lakehouse, resolver desafios de entrega em projetos de clientes e apoiar iniciativas comerciais com soluções técnicas robustas. Você trabalhará com tecnologias de ponta como Spark/PySpark, Delta Lake e Unity Catalog, garantindo as melhores práticas de governança, segurança e otimização de desempenho.
Nesta posição, suas responsabilidades incluem desenhar e manter pipelines robustos de batch e streaming usando Databricks, implementar práticas de lakehouse com Delta Lake, aplicar padrões de governança e segurança com Unity Catalog, implementar práticas de CI/CD, otimizar performance e custo, e apoiar pré-vendas com soluções de arquitetura e workshops técnicos. Você será parte de um ambiente de trabalho flexível e dinâmico que promove o crescimento pessoal e oferece um pacote de compensação atrativo com benefícios como seguro de saúde, vida e programa de referência.
A Capgemini é uma empresa global de transformação digital e de negócios, com mais de 340.000 colaboradores em mais de 50 países, reconhecida por suas capacidades de mercado em IA, cloud e dados, combinadas com expertise profunda em indústrias e um ecossistema robusto de parceiros.
Competências
- Databricks
- Apache Spark
- PySpark
- SQL
- Python
- Delta Lake
- Unity Catalog
- CI/CD
- DevOps
- Processamento distribuído
- Governança de dados
- Segurança de dados
- Otimização de performance
- Arquitetura de dados
Responsabilidades
- Desenhar, construir e manter pipelines robustos de batch e streaming usando Databricks (Spark/PySpark, Databricks Workflows/Jobs)
- Implementar práticas de lakehouse com Delta Lake (confiabilidade, evolução de schema, otimização) e modelagem de dados para análise
- Aplicar padrões de governança e segurança usando Unity Catalog (controle de acesso, linhagem/descoberta) em coordenação com requisitos de segurança do cliente
- Implementar práticas de CI/CD para notebooks/jobs e promover testes, observabilidade e confiabilidade operacional
- Otimizar performance e custo (configuração de cluster, tuning de workload) e solucionar problemas em produção
- Apoiar pré-vendas: contribuir para soluções de arquitetura, estimativas e workshops técnicos em ambiente de consulting
Benefícios
- Ambiente de trabalho flexível e dinâmico
- Política de trabalho híbrido com flexibilidade de horários e local de trabalho
- Programas locais de desenvolvimento de carreira e reskilling
- Ambiente empoderador com autonomia e relacionamentos entre pares
- Pacote de compensação atrativo
- Seguro de saúde e vida
- Programa de referência com bónus para recomendações de talentos
- Benefícios adicionais de acordo com parcerias em vigor
- Igualdade de oportunidades e diversidade no recrutamento e emprego
Conhece alguém para esta vaga?
Empregos semelhantes
