AWS Data Engineer
Tecnologia
Lisboa, PortugalHá 1 mês
Tempo inteiro
Descrição da vaga
Na Planck Technologies, estamos a recrutar Data Engineers para integrar um projeto desafiante na área de Data Engineering e Lakehouse, com foco no desenvolvimento e evolução de frameworks de ingestão e transformação de dados, orquestração de pipelines e implementação de soluções escaláveis.
📅 Início previsto: Novembro/Dezembro
🎯 Requisitos obrigatórios:
- Experiência profissional em Data Engineering;
- Experiência com AWS e ambientes de Data Platform / Lakehouse;
- Conhecimentos de Lakehouse Engineering;
- Experiência com Apache Iceberg, nomeadamente operações e otimização de tabelas;
- Experiência em orquestração de pipelines de dados;
- Conhecimentos de Data Processing e transformação de dados;
- Experiência em performance tuning;
- Conhecimentos de processos de compaction e retention de tabelas;
- Experiência na resolução de problemas em pipelines de dados;
- Conhecimentos de práticas de SDLC e produção de entregáveis;
- Capacidade de trabalhar com equipas de domínio na implementação de soluções escaláveis de ELT e orquestração.
⭐ Valorizamos ainda:
- Experiência com Python e SQL;
- Conhecimentos de dbt;
- Experiência com Docker e Kubernetes;
- Conhecimentos de Terraform / Infrastructure as Code;
- Experiência com Git / GitLab e processos de CI/CD;
- Experiência com Argo Workflows;
- Conhecimentos de AWS Glue, S3, Redshift, MWAA ou Step Functions;
- Experiência em ambientes Agile e equipas multidisciplinares.
🧩 Principais responsabilidades:
- Suporte e evolução de frameworks de ingestão e transformação de dados;
- Desenvolvimento e manutenção de pipelines de dados;
- Implementação e otimização de operações sobre tabelas Apache Iceberg;
- Gestão de processos de compaction e retention;
- Análise e resolução de problemas relacionados com pipelines;
- Otimização do desempenho dos processos de processamento de dados;
- Desenvolvimento de soluções escaláveis de ELT e data processing;
- Colaboração com equipas de domínio na implementação de padrões de engenharia de dados;
- Participação no ciclo de desenvolvimento, testes, versionamento e release de soluções;
- Produção e manutenção de documentação técnica.
📩 Envia o teu CV para daniela.rio@planck.pt ou entra em contacto para mais informações.
Keywords
GitLabOrchestrationMS-DOSRedshiftPythonSqlApache LicenseApache Http ServerCI / CDWindows Media PlayerAWSGitDockerKubernetesTerraformCI/CD
Interessado nesta vaga?