- Híbrido
- Tempo inteiro
Descrição
A Celfocus procura um Engenheiro de Dados para integrar equipas multidisciplinares e trabalhar em projetos internacionais. Nesta função, você será responsável por desenhar, construir e manter plataformas de dados escaláveis, desenvolvendo pipelines de processamento de dados e soluções de integração de dados de alta qualidade. Trabalhará com diferentes fontes de dados e tecnologias, garantindo fluxo eficiente de dados e permitindo que cientistas de dados, analistas e outras partes interessadas acessem e analisem informações efetivamente.
Sua missão envolverá coletar, processar e analisar grandes conjuntos de dados complexos, implementar workflows de processamento usando tecnologias como Spark e Apache Beam, e garantir segurança e privacidade dos dados. Você colaborará com equipas multifuncionais, monitorará desempenho do sistema e otimizará para alta disponibilidade e escalabilidade, trabalhando num ambiente orientado por IA com as tecnologias mais recentes.
A Celfocus oferece um modelo de trabalho híbrido com flexibilidade, oportunidades de desenvolvimento contínuo, possibilidade de explorar diferentes carreiras e benefícios que apoiam o seu dia a dia. Somos uma empresa comprometida com a diversidade e inclusão, operando em mais de 25 países desde 2000.
Competências
- AWS
- Python
- Java
- Scala
- Apache Spark
- Apache Flink
- Apache Kafka
- Elasticsearch
- Hadoop
- Hive
- Sqoop
- Flume
- Impala
- Kafka Streams
- Kafka Connect
- Druid
- SQL
- Git
- Modelagem de Dados
- Design de Bases de Dados
- Sistemas Distribuídos
- Arquitetura de Processamento de Dados
- Bases de Dados Relacionais
- Bases de Dados NoSQL
- ETL
- Apache Beam
- GCP
- Azure Data Factory
Responsabilidades
- Desenhar, construir e manter plataformas de dados escaláveis
- Coletar, processar e analisar grandes e complexos conjuntos de dados de várias fontes
- Desenvolver e implementar workflows de processamento de dados usando tecnologias como Spark e Apache Beam
- Colaborar com equipas multifuncionais para garantir precisão e integridade dos dados
- Garantir segurança e privacidade dos dados através da implementação adequada de controlos de acesso e encriptação
- Extração de dados de várias fontes, incluindo bases de dados, sistemas de ficheiros e APIs
- Monitorizar desempenho do sistema e otimizar para alta disponibilidade e escalabilidade
Benefícios
- Modelo de trabalho híbrido com flexibilidade e equilíbrio
- Oportunidade de trabalhar em projetos internacionais
- Possibilidade de explorar diferentes funções e caminhos de carreira
- Oportunidades contínuas de aprendizagem e desenvolvimento
- Ambiente orientado por IA, trabalhando com as tecnologias mais recentes
- Conjunto de benefícios e vantagens para apoiar o seu dia a dia