Celfocus

Data Engineer | GCP

CelfocusPortoEuropehá mais de um mês

Descrição

Celfocus is seeking a Data Engineer to join our multidisciplinary teams and help turn data into actionable insights. In this role, you will be responsible for designing, building, and maintaining scalable data platforms that support data storage, processing, orchestration, and analysis. You'll work with leading companies across various sectors, implementing efficient data pipelines and integration solutions using modern technologies like Spark, Apache Beam, and GCP services.

Your mission will involve collecting, processing, and analyzing large and complex datasets from diverse sources while ensuring data accuracy, security, and high availability. You'll collaborate with cross-functional teams including data scientists and analysts to enable effective data access and analysis. This position offers the opportunity to work on international projects in a hybrid environment with continuous learning opportunities in a growing AI-driven organization.

Competências

  • Google Cloud Platform (GCP)
  • Python
  • Java
  • Scala
  • Apache Spark
  • Apache Beam
  • Kafka
  • Elasticsearch
  • Hadoop
  • Hive
  • Sqoop
  • Flume
  • Impala
  • Kafka Streams
  • Kafka Connect
  • Druid
  • Modelagem de dados
  • Design de bases de dados
  • ETL
  • Apache Kafka
  • Talend
  • Sistemas distribuídos
  • SQL
  • Bases de dados relacionais
  • Bases de dados NoSQL
  • AWS S3
  • Azure Data Factory
  • Git

Responsabilidades

  • Desenhar, construir e manter plataformas de dados escaláveis
  • Recolher, processar e analisar grandes conjuntos de dados complexos de várias fontes
  • Desenvolver e implementar fluxos de processamento de dados usando tecnologias como Spark e Apache Beam
  • Colaborar com equipas multifuncionais para garantir a precisão e integridade dos dados
  • Garantir a segurança e privacidade dos dados através da implementação adequada de controlos de acesso e encriptação
  • Extrair dados de várias fontes, incluindo bases de dados, sistemas de ficheiros e APIs
  • Monitorizar o desempenho do sistema e otimizar para alta disponibilidade e escalabilidade

Benefícios

  • Trabalho híbrido com flexibilidade e equilíbrio
  • Oportunidade de trabalhar em projetos internacionais
  • Possibilidade de explorar diferentes funções e caminhos de carreira
  • Oportunidades contínuas de aprendizagem e desenvolvimento
  • Ambiente orientado por IA, trabalhando com as tecnologias mais recentes
  • Um conjunto de benefícios e vantagens para apoiar o seu dia a dia

Empregos semelhantes

Celfocus
Celfocus
Tecnologia — software para telecomunicações
Ver perfil da empresa
Data Engineer | GCPCelfocus
Candidatar-me