Pular para o conteúdo principal

AWS Data Engineer

Tecnologia
Planck Technologies
Lisboa, PortugalHá 1 mês
Tempo inteiro

Descrição da vaga

Na Planck Technologies, estamos a recrutar Data Engineers para integrar um projeto desafiante na área de Data Engineering e Lakehouse, com foco no desenvolvimento e evolução de frameworks de ingestão e transformação de dados, orquestração de pipelines e implementação de soluções escaláveis.

📅 Início previsto: Novembro/Dezembro

🎯 Requisitos obrigatórios:

  • Experiência profissional em Data Engineering;
  • Experiência com AWS e ambientes de Data Platform / Lakehouse;
  • Conhecimentos de Lakehouse Engineering;
  • Experiência com Apache Iceberg, nomeadamente operações e otimização de tabelas;
  • Experiência em orquestração de pipelines de dados;
  • Conhecimentos de Data Processing e transformação de dados;
  • Experiência em performance tuning;
  • Conhecimentos de processos de compaction e retention de tabelas;
  • Experiência na resolução de problemas em pipelines de dados;
  • Conhecimentos de práticas de SDLC e produção de entregáveis;
  • Capacidade de trabalhar com equipas de domínio na implementação de soluções escaláveis de ELT e orquestração.

⭐ Valorizamos ainda:

  • Experiência com Python e SQL;
  • Conhecimentos de dbt;
  • Experiência com Docker e Kubernetes;
  • Conhecimentos de Terraform / Infrastructure as Code;
  • Experiência com Git / GitLab e processos de CI/CD;
  • Experiência com Argo Workflows;
  • Conhecimentos de AWS Glue, S3, Redshift, MWAA ou Step Functions;
  • Experiência em ambientes Agile e equipas multidisciplinares.

🧩 Principais responsabilidades:

  • Suporte e evolução de frameworks de ingestão e transformação de dados;
  • Desenvolvimento e manutenção de pipelines de dados;
  • Implementação e otimização de operações sobre tabelas Apache Iceberg;
  • Gestão de processos de compaction e retention;
  • Análise e resolução de problemas relacionados com pipelines;
  • Otimização do desempenho dos processos de processamento de dados;
  • Desenvolvimento de soluções escaláveis de ELT e data processing;
  • Colaboração com equipas de domínio na implementação de padrões de engenharia de dados;
  • Participação no ciclo de desenvolvimento, testes, versionamento e release de soluções;
  • Produção e manutenção de documentação técnica.

📩 Envia o teu CV para daniela.rio@planck.pt ou entra em contacto para mais informações.

Keywords
GitLabOrchestrationMS-DOSRedshiftPythonSqlApache LicenseApache Http ServerCI / CDWindows Media PlayerAWSGitDockerKubernetesTerraformCI/CD

Interessado nesta vaga?