English
Svenska
Dansk
Dutch
Deutsch
Français
Suomi
Himanshu S.
Data Engineer
Himanshu er en erfaren dataingeniør med lang erfaring og faglig kompetanse innen SQL, Snowflake og AWS. Han har jobbet i ulike bransjer, inkludert helse, detaljhandel, bil og finans.
I løpet av de siste fem årene har Himanshu finpusset ferdighetene sine, og posisjonert seg som en fullstack-datakonsulent med utgangspunkt i sin ekspertise innen både maskinlæring og datavitenskap.
I løpet av sitt tjenesteforhold hos KnowledgeFoundry og ZS Associates ga Himanshu betydelige bidrag til deres tekniske team. Hans mangfoldige ferdigheter og engasjement har etablert ham som en pålitelig utvikler innen datateknikk.
Hovedekspertise
- OpenCV 4 år
- Linux 5 år
- LangChain 2 år
Andre kunnskaper
- Docker 3 år
- FastAPI 2 år
- ChatGPT API 2 år
Utvalgt opplevelse
Arbeidserfaring
Data Engineer
InfoGain - 10 months
- Laget en datavarehusløsning ved hjelp av AWS Redshift og AWS Glue, og migrerte en OLAP-database fra MS SQL Server.
- Etablert en DBT-pipeline for ETL-prosesser, overføring av data mellom et MySQL-lager og en aktivitetsdatabase til en Neo4j-grafdatabase ved hjelp av innfødt Python-programmering. Oppsettet ble implementert på en AWS Linux-boks med Neo4j kjørt som en Docker-container.
- Utviklet en ETL-pipeline for å gjennomføre markedskurvanalyser og annen markedsføringsstatistikk på millioner av rader med transaksjonsdata. Brukt Redshift som en transaksjonsdatabase og fylt den på en serverløs måte ved hjelp av Amazon Lambda-funksjoner i sanntid.
Teknologier:
- Teknologier:
Python
ETL
- Data Engineering
AWS
Data Engineer
ZS Associates - 6 months
- Utviklet en pipeline for å konvertere data til et strukturert format, slik at de kan serveres til Prodigy for ML-relatert tagging. Hele pipelinen ble konstruert på en modulær måte ved hjelp av ren Python og skallskripting.
- Implementert datatransformasjoner i Python og lagret de behandlede dataene i en Amazon S3-bøtte for lagring og tilgjengelighet.
Teknologier:
- Teknologier:
-
Python
Data Engineer
KnowledgeFoundry - 6 years 3 months
- Automatisert prosessen med å skrive Hive-spørringer for ETL av flere tabeller (både engangs og inkrementelt) ved å generere automatiserte skript.
- Leste CSV-filer fra mapper, opprettet tabeller og utførte inkrementelle innlastinger sekvensielt.
- Sette opp Snowflake som den primære lagringsløsningen for strukturerte data og benytte DBT for ETL-prosesser. Utarbeidet SQL-baserte modeller for å definere transformasjonslogikk og sikre fleksibilitet med inkrementell innlasting og versjonskontroll ved hjelp av DBT.
- Forberedt transformerte data for analyse ved hjelp av business intelligence-verktøy, noe som gjør det enklere å finne innsikt. Gjennomførte regelmessige kontroller i Snowflake og DBT for å opprettholde dataintegritet og pipelinefunksjonalitet.
- Designet og utviklet datapipelines for å hente ut, transformere og laste inn data fra ulike kilder til et sentralisert datalager.
Teknologier:
- Teknologier:
-
ETL
SQL
- Data Engineering
Utdannelse
BSc.Information Technology
Dharmsinh Desai University · 2015 - 2019
Finn din neste utvikler innen dager, ikke måneder
I løpet av en kort 25-minutters samtale ønsker vi å:
- Forstå dine utviklingsbehov
- Forklare prosessen vår der vi matcher deg med kvalifiserte, evaluerte utviklere fra vårt nettverk
- Dele de neste stegene for å finne riktig match, ofte på mindre enn en uke