Engenheiro de dados | BigData | Pyspark | SQL
Envie uma proposta de trabalho diretamente para este candidato
Bacharel em Engenharia de Controle e Automação, atuando como Engenheiro de Dados para um dos três maiores bancos do país através de uma consultoria financeira. Conhecimento em implantação, orquestração e sustentação de pipelines de dados no Sistema distribuido Hadoop, utilizando framework Spark.
Experiencia em extração e transformação de dados com Pyspark em estruturas de datalake e datawarehouse. Fundamentos em modelos de Machine learning e redes neurais artificiais. Busco uma posição de Engenheiro de dados em uma empresa que valorize a inovação e utilização de ferramentas emergentes, de forma que eu possa contribuir para a evolução de projetos e desenvolver ainda mais habilidades analíticas.
Atribuição: Consultor de Engenharia de dados
· Desenvolvimento de scripts em Python/Pyspark e SQL para transformações e análise de dados
· Tecnologias Hadoop e Spark
· Versionamento Git
· Comandos Linux/Unix
· Implantação de pipeline de dados e orquestração de workflow de dados
· Mapeamento de variáveis junto ao time de negócios para identificar necessidades e criar soluções personalizadas
· Esteira DevOps
· Experiência em tunning de processos e extrações/ingestões de dados
· Implantações junto ao motor FICO
· Consultas em bancos relacionais e não relacionais como Hive e Hbase
· Certificação AWS Cloud Practitioner, com experiência em AWS S3, Athena, Glue e Quicksight
· Conhecimento em DevOps e em utilizar esteiras de implantação e versionamento de código
· Excelente habilidade em resolução de problemas e em trabalhar em equipe.
· Algoritimos de Machine Learning
· Analise de dados com bibliotecas Numpy, Pandas e Scikit
· Python orientado a objetos
Finalizado em agosto de 2022
Instituto Federal São Paulo - Campus Guarulhos Guarulhos, SP
Bacharelado em Engenharia de Controle e Automação