Lisboa/Portugal
Engenheiro de dados AWS
Sobre a vaga
O QUE VOCÊ VAI FAZER:
Dar suporte e evoluir frameworks de ingestão e transformação num Lakehouse em AWS.
Otimizar tabelas Apache Iceberg, gerindo processos de compaction e retention.
Investigar e resolver problemas em pipelines, com foco em performance tuning.
Apoiar equipes de domínio na adoção de padrões escaláveis de ELT e orquestração.
Participar de release management e das entregas do ciclo de desenvolvimento (SDLC).
Para a posição de Lead: liderar tecnicamente o time, definindo padrões e revisando entregas.
Horarío de trabalho integral no fuso horário +4 (Lisboa, Portugal).
NECESSÁRIO INGLÊS FLUENTE.
Requisitos
- OBRIGATÓRIO:
- 4+ anos em Data Engineering, atuando em nível pleno/sênior.
- Inglês fluente (comunicação diária com cliente e time).
- Apache Spark (PySpark), incluindo troubleshooting e performance tuning.
- Apache Iceberg ou outro table format (Delta Lake/Hudi): otimização de tabelas, compaction e retention.
- AWS para dados: S3, Glue (Data Catalog e jobs) ou EMR, Athena, IAM e CloudWatch.
- Orquestração de pipelines: MWAA (Airflow) e Step Functions.
- CI/CD e versionamento de pipelines (release management).
- DIFERENCIAIS:
- Experiência prévia específica com Apache Iceberg em produção.
- IaC (Terraform ou CloudFormation), Lake Formation e Redshift.
- Experiência como Tech Lead (arquitetura, code review, mentoria).
- Experiência em projetos internacionais, atuando com clientes ou times estrangeiros em inglês.
Benefícios
- Remuneração (PJ): Range de R$ 17.000 a 30.000/mês, conforme senioridade
- 100% Remoto | Horário de Lisboa (Portugal)
- Início: novembro/dezembro
- Contrato: longa duração
- Inglês fluente