Pular para o conteúdo principal
Rafael Jurkfitz

Rafael Jurkfitz

Engenheiro de Computação com experiência em Engenharia de Dados

Talento
Porto Alegre, Porto AlegreMembro desde 10 de janeiro de 2025
PythonSQLPandasPySparkMicrosoft FabricOneLakePostgreSQLDockerGCPLakehouse
·

Contratar esta pessoa

Envie uma proposta de trabalho diretamente para este candidato

PythonSQLPandasPySparkMicrosoft Fabric

Sobre

Engenheiro de Computação com experiência em Engenharia de Dados, especializado na construção de pipelines escaláveis, orquestração de ETLs e arquiteturas de Modern Data Stack. Experiência com modelagem de dados, com objetivo de migração de tabelas Postgresql para deltatables em Lakehouse no Fabric. E otimização de desempenho de processamento de Big Data com PySpark. Foco em transformar dados brutos em ativos estratégicos para as empresas.

Experiência

Engenheiro de dados at QueroQuero (2025-03 – Present)

  • Estruturação de OneLake: Centralização de fontes de dadosno Microsoft Fabric, integrando bancos PostgreSQL e APIs externas.
  • Desenvolvimento de Pipelines: Implementação de mais de 50 pipelines de dados (ETL/ELT), habilitando acesso self-service para diversos setores estratégicos da empresa.
  • Otimização de Performance: Refatoração de pipelines de Pandas para PySpark, solucionando problemas de Out of Memory (OOM) e garantindo escalabilidade.
  • Eficiência de Escrita: Redução de 84% no tempo de escrita em Delta Tables (de 50 minutos para menos de 10 minutos) através da otimização de notebooks e deltatables.
  • Redução de Custos: Migração de workloads Spark subutilizados para scripts otimizados, eliminando custos desnecessários em processamentos menores.
  • Governança de Dados: Implementação de controles de acesso (RBAC) e segurança ao nível de item e workspace no ambiente Fabric.

Analista de dados/Engenheiro de dados at Capitalx (2022-06 – 2024-02)

  • Modelagem de Dados: Design e manutenção de tabelas em PostgreSQL para suporte a decisões estratégicas.
  • Automação de Trading: Desenvolvimento de BOT para trading em Python, incluindo armazenamento de dados históricos e análise de estratégias.
  • Integrações e Deploy: Integração com APIs financeiras externas e deploy de aplicações containerizadas via Docker em Google Cloud (GCP).
  • Orquestração: Criação e gerenciamento de tarefas recorrentes (Crons) para execução de rotinas de extração de dados.

Formação

Bacharel in Engenharia da Computação – Instituto Brasileiro de Gestão de Negócios (FTEC) (2015-02 – 2024-01)

Avaliações

Relacionado