English
Svenska
Dansk
Deutsch
Français
Norsk
Suomi
Dean N.
Data Engineer
Dean is een data engineer met vijf jaar commerciële ervaring. Zijn voornaamste expertise ligt in het ontwerpen, bouwen en onderhouden van robuuste datapijplijnen en -infrastructuur.
Hij is zeer bedreven in het omgaan met grote datasets, het optimaliseren van dataworkflows en het waarborgen van de nauwkeurigheid en betrouwbaarheid van gegevens voor analyse en rapportage.
Hij is een zelfstarter die autonoom kan werken, maar hij blinkt net zo goed uit in teamverband.
Dean's passie voor technologie drijft hem om zijn vaardigheden voortdurend te verbeteren en nieuwe tools en methodologieën te omarmen die bijdragen aan effectiever gegevensbeheer en -analyse.
Hoofd expertise
- Terraform 4 jaar
- ETL 4 jaar
- Python 4 jaar
Andere vaardigheden
- Bash 4 jaar
- Shell 4 jaar
- Linux 4 jaar
Geselecteerde ervaring
Dienstverband
Data Engineer
King - 3 jaar 1 maand
- Gebruikte Airflow om ETL-pijplijnen te ontwikkelen, waarbij gegevens werden getransformeerd van ruwe formaten naar gemakkelijk bruikbare vormen voor inzichten.
- Gebruikte Cloud Functions, Scheduler en Sheets om ETL-pijplijnen te bouwen die input van minder technische belanghebbenden mogelijk maakten.
- Verbeterde gegevenskwaliteit en minder fouten in de pijplijn door het maken van dashboards voor monitoring en waarschuwingen met behulp van GCP Cloud Monitoring.
- Ontwierp datawarehousetabellen met een focus op efficiëntie en kosteneffectieve query's, waarbij gebruik werd gemaakt van partitionerings- en clusteringstechnieken.
- Verbeterde onderhoudbaarheid van de codebase door DRY-principes toe te passen en Jinja te gebruiken waar van toepassing.
- Verbeterde de CI/CD pipeline door het testen van SQL-scripts te integreren.
- Terraform gebruikt om GCP resources programmatisch aan te maken en te beheren.
Technologieën:
- Technologieën:
Terraform
ETL
Python
SQL
Google Cloud
Bash
Shell
Linux
Apache Airflow
Dataflow
- Data Engineering
Data Engineer
Inmarsat - 6 maanden
- Gebruikte een combinatie van EC2-instanties en opdrachtregel om te SSH-en naar on-premises machines en CSV's over te zetten naar S3-buckets.
- Airflow vervangen door Prefect om gegevens te transformeren en het workflowbeheerproces te optimaliseren.
- DBT en Jinja gebruikt om testscripts te bouwen en het datawarehouse te bouwen.
- Terraform gebruikt om GCP resources programmatisch in te zetten.
Technologieën:
- Technologieën:
-
Terraform
-
Python
-
SQL
AWS
-
Bash
Data Engineer
LADbible Group - 1 jaar 1 maand
- Apache Beam / Google Dataflow gebruikt om pipelines voor batchverwerking te bouwen.
- Het automatiseren van meerdere ETL-pijplijnen voor het extraheren van gegevens uit verschillende bronnen, waaronder cloudopslag, Google Sheets en API's, specifiek gericht op Snapchat- en Ad Revenue-gegevens met uitvoer naar BigQuery-tabellen of dashboards.
- Zorgde ervoor dat code unit testbaar was door Pytest te gebruiken en een Test-Driven Development (TDD) aanpak toe te passen.
- dashboards gemaakt in Google Data Studio (GDS) en alerting ingesteld in GCP om datapijplijnen te monitoren.
- Terraform gebruikt om resources op GCP te plaatsen.
Technologieën:
- Technologieën:
-
Terraform
-
ETL
-
Python
-
SQL
-
Google Cloud
-
AWS
-
Bash
-
Shell
-
Linux
-
Apache Airflow
-
Dataflow
- Data Engineering
Data Analyst
Publicis Media - 6 maanden
- Schreef SQL-query's voor dimensionale datamodellering in Power BI.
- Python (Pandas) gebruikt om datasets te manipuleren voor export naar Excel.
- Op maat gemaakte Power BI-rapporten voor een helder en beknopt inzicht in gegevens.
- Gebruik van DAX-taal binnen Power BI om gegevens te transformeren en te berekenen.
- ETL van gegevens uit verschillende bronnen om datamodellen te bouwen, meestal in de vorm van een ster.
- Gegevens uit verschillende bronnen gehaald, relaties tussen datasets gelegd en de gegevens gemodelleerd.
Technologieën:
- Technologieën:
-
Python
-
SQL
Pandas
Microsoft Power BI
Data Analyst
Veolia - 1 jaar 5 maanden
- Gebruikte een combinatie van Power BI en SQL om datamodellen te maken en inzichtelijke rapportvisualisaties te ontwikkelen.
- Bouwde Power BI-apps en nam het eigendom ervan op zich, waarbij hij de toegang voor belangrijke belanghebbenden bewaakte en verzekerde.
- DAX toegepast binnen Power BI om berekeningen en metingen te maken op dashboards.
- Ontwikkelde KPI-rapporten en dashboards in Excel met behulp van gegevens die uit SQL-databases werden geïmporteerd en vernieuwd.
- Gegevens uit SQL gehaald en analyses uitgevoerd in Excel met behulp van geavanceerde formules en functies.
- Maakte intelligente webapplicaties voor operators met behulp van gegevens geïmporteerd in Esri ArcGIS.
- Schreef efficiënte en complexe SQL-query's met pivots, joins en geneste query's.
Technologieën:
- Technologieën:
-
SQL
- Data Engineering
- Data Analytics
-
Microsoft Power BI
Educatie
BSc.Business Administration, Management and Operations
De Montfort University · 2009 - 2011
Vind jouw volgende ontwikkelaar binnen enkele dagen, niet maanden
In een kort gesprek van 25 minuten:
- gaan we in op wat je nodig hebt om je product te ontwikkelen;
- Ons proces uitleggen om u te matchen met gekwalificeerde, doorgelichte ontwikkelaars uit ons netwerk
- delen we de stappen met je om de juiste match te vinden, vaak al binnen een week.