Feedzai logo
Feedzai3.1

Senior Data Engineer - Product Feedzai Portugal Engineering

RemotoTempo inteiroTempo inteiroPublicado há 108 dias

SEM TEMPO AGORA?

Avisamos-te de novas vagas como esta

Recebe um email quando a Feedzai abrir novas vagas.

Feedzai está procurando um Senior Data Engineer para integrar a equipa de Pulse Engineering. Nesta posição, você será responsável pela estabilidade, escalabilidade e performance da Data Science Framework (DSF), trabalhando na intersecção de sistemas distribuídos, engenharia de big data e experiência do desenvolvedor. Você garantirá que as cargas de trabalho de ciência de dados funcionem de forma confiável, eficiente e em escala, suportando diretamente o Risk Engine em produção.

Como especialista em Big Data com profunda expertise em Apache Spark e sistemas de dados distribuídos, você será responsável por re-arquitetar e escalar componentes de processamento de big data, analisar padrões de carga de trabalho, garantir estabilidade de jobs Spark em clusters EMR ou Kubernetes, e operar componentes do ecossistema Hadoop. Você atuará seguindo a filosofia DevOps de "você constrói, você executa", participando de rotações on-call para garantir confiabilidade 24/7 da plataforma crítica de missão.

Responsabilidades

  • Re-arquitetar e escalar componentes existentes de processamento de big data que alimentam DSF
  • Analisar padrões de carga de trabalho (jobs Spark, atividade de notebooks, uso da DS API) e impulsionar melhorias de performance, confiabilidade e custo
  • Garantir estabilidade de jobs Spark em execução em clusters EMR ou Kubernetes
  • Operar e evoluir componentes do ecossistema Hadoop (HDFS, YARN) e runtimes Spark
  • Manter e melhorar pipelines de ingestão de dados entre Runtime e DSF (Firehose, Glue → S3)
  • Melhorar a experiência de desenvolvedor e utilizadores avançados em JupyterLabs e DS API
  • Colaborar com engenheiros de produto, cientistas de dados e equipas de plataforma na execução do roteiro DSF
  • Ser proprietário de serviços ao longo de seu ciclo de vida seguindo práticas DevOps e participar em rotação on-call para a plataforma crítica de missão

Competências

Apache SparkSistemas distribuídosJavaHadoop ecosystemHDFSYARNLinuxETL/ELT pipelinesJupyterHubJupyterLabsEMRKubernetesAWS S3AWS GlueKafkaAirflowScalaPythonDevOpsMonitoringContinuous deliveryNessieTrinoIceberg

VAGAS SEMELHANTES

3 outras vagas na Feedzai perto de ti

Benefícios

Ambiente seguro, aberto e colaborativo que encoraja inovação e aprendizado contínuo
Oportunidade de trabalhar com desafios técnicos de classe mundial
Compensação dedicada para responsabilidades on-call
Imersão em programa de integração de 30 dias com treinamento, conexões e tempo individual com gerente
Acesso a ambiente de sombra com colegas de forma virtual ou presencial

A Feedzai EM NÚMEROS

Trabalhar na Feedzai

700

colaboradores

3.1

3 reviews

Tecnologia interessante em fraud detection e AI. Aprendizagem constante. Ambiente de startup com recursos de empresa maior. Fruta e café grá…
Ex-colaborador · Software Engineer
MARIA · TUA COACH IA

Posso preparar-te a entrevista para esta vaga em 5 minutos.

Candidatar-se a esta vaga

A sua candidatura é submetida no okemprego e processada pela InterviewHR.

Ao carregar o teu CV, concordas com a nossa Política de Privacidade e Termos de Utilização.

Esta candidatura é processada pela InterviewHR.

A sua candidatura poderá ser partilhada com a empresa anunciante.

Esta candidatura é submetida via InterviewHR, parceiro da okemprego. · Privacidade · Termos