Shubham Palande
Data Engineer
Hire this person
Send a job offer directly to this candidate
About
Hochmotivierter und detailorientierter Data Engineer mit Fachkenntnissen in SQL, PySpark, Python und Cloud-Computing-Technologien. Versiert in der Entwicklung von Datenextraktionsprozessen und Reporting-Lösungen mit Spark in der Databricks-Umgebung. Erfahren im Umgang mit großskaligen Datensätzen, Cloud-Migrationsprojekten und Azure-basierten Analyselösungen.
Ausgeprägte Fähigkeit zur Zusammenarbeit mit Geschäftsteams, um datengetriebene Erkenntnisse und skalierbare Datentechnik-Lösungen zu liefern.
Experience
Associate Data Engineer - Tata AIG General Insurance Company Limited
(2023-06)
- Einsatz von SQL für Datenextraktion, -manipulation und -analyse zur Verbesserung von Entscheidungsprozessen.
- Entwicklung von Datenextraktions- und Reporting-Lösungen mithilfe von PySpark-Code in der Databricks-Umgebung für die Verarbeitung großskaliger Daten.
- Durchführung von Datenbereinigung, -transformation und -aggregation mit PySpark Dataframes und Spark SQL.
- Optimierung von PySpark-Jobs für bessere Leistung und reduzierte Ausführungszeiten bei großen Datensätzen.
- Leitung des Mappers-Migrationsprojekts, bei dem über 140 Legacy-Berichte von R-Code nach Pentaho migriert wurden, unter Sicherstellung eines reibungslosen Übergangs und der Funktionalität.
- Erfolgreiche Migration eines großskaligen Data-Lake-Projekts von On-Premise in die Cloud unter Gewährleistung eines nahtlosen Datenflusses und der Geschäftskontinuität.
- Entwicklung mehrerer Berichte mit Microsoft Azure Cloud, wobei Kenntnisse in Datenverwaltung, Visualisierung und cloudbasierter Berichtserstellung unter Beweis gestellt wurden.
- Zusammenarbeit mit Geschäftsstakeholdern zur Anpassung von Datenausgaben und Reporting-Lösungen.
Praktikant - Adani Electricity Mumbai Limited
(2019-05 - 2019-06)
- Erkundung und Bewertung der OutSystems-Plattform zur Entwicklung einer Shopping-Cart-Webanwendung.
- Praktische Erfahrung mit Low-Code-Entwicklungswerkzeugen und Anwendungs-Workflows gesammelt.
Education
B.Tech - Computertechnik - Atharva College Of Engineering (2023)
Diploma - Computertechnik - Vidyalankar Polytechnic (2020)
SSC - IES V N Sule Guruji English Medium High School (2017)
