Data Engineer

– Implementerade dataflödesautomation med Azure Data Factory, vilket ökade operationell effektivitet med 40% för tidssensitiva rapporter. – Aktivt engagerad i prestandaoptimering och optimering av Azure Databricks-jobb, med fokus på resursutnyttjande och minskning av behandlingstid. – Skapade Azure Databricks anteckningsblock med Python, Spark, PySpark och SQL för att utföra datatransformationer, ingångar och modelleringsuppgifter på stora och komplexa dataset.

– Byggde skalbara och effektiva ETL/ELT datarör för datautvinning, transformation och inladdning med Azure-tjänster för databehandling och lagring. – Bidrog till ETL batch- och strömprocesseringsjobb i Azure Databricks, vilken transformerade och laddade data i olika datasoner. – Automatiserade repetitiva databehandlingsuppgifter, vilket resulterade i en 45% minskning av den manuella arbetsbelastningen och minskade mänskliga fel. – Utförde datatransformations- och städoperations för att upprätthålla datakvalitet och noggrannhets standarder.

– Implementerade dataintegrationer och valideringskontroller i SQL och Microsoft Azure Synapse Analytics för att säkerställa smidig datainladdning och flöde. – Byggde en realtids databehandlingspipeline som underlättade snabba insikter om kundbeteende och marknadstrender. – Optimerade batch datararbetsflöden för en ledande e-handelsplattform, säkerställde subtimgrande tillgång på kritiska affärsmått och KPI:er, vilket stärkte realtids beslutsfattande. – Samarbetade nära med tvärfunktionella team för att samla in krav, designa robusta datalösningar och ge värdefulla insikter till organisatoriska intressenter.