Dean N.

Data Engineer

Dean er dataingeniør med fem års kommerciel erfaring. Hans primære ekspertise ligger i at designe, opbygge og vedligeholde robuste datapipelines og infrastruktur.

Han er meget dygtig til at håndtere store datasæt, optimere data-workflows og sikre nøjagtigheden og pålideligheden af data til analyse og rapportering.

Han er en selvstarter, der er i stand til at arbejde selvstændigt, men han udmærker sig lige så godt i samarbejdsmiljøer.

Deans passion for teknologi driver ham til hele tiden at forbedre sine færdigheder og omfavne nye værktøjer og metoder, der bidrager til mere effektiv datastyring og -analyse.

Hovedekspertise

  • Terraform
    Terraform 4 år
  • ETL
    ETL 4 år
  • Python
    Python 4 år

Andre færdigheder

  • Bash
    Bash 4 år
  • Shell
    Shell 4 år
  • Linux
    Linux 4 år
Dean

Dean N.

United Kingdom

Match med udvikler her

Udvalgt oplevelse

Beskæftigelse

  • Data Engineer

    King - 3 flere år 1 måned

    • Brugte Airflow til at udvikle ETL-pipelines og omdanne data fra rå formater til let anvendelige former for indsigt.
    • Anvendte Cloud Functions, Scheduler og Sheets til at opbygge ETL-pipelines, der tillod input fra mindre tekniske interessenter.
    • Forbedret datakvalitet og reduceret pipelinefejl ved at oprette overvågnings- og advarselsdashboards ved hjælp af GCP Cloud Monitoring.
    • Designede datalagertabeller med fokus på effektivitet og omkostningseffektive forespørgsler ved hjælp af partitionerings- og klyngeteknikker.
    • Forbedret vedligeholdelse af kodebasen ved at anvende DRY-principper og bruge Jinja, hvor det er relevant.
    • Forbedret CI/CD-pipeline ved at integrere test af SQL-scripts.
    • Brugt Terraform til programmatisk at oprette og administrere GCP-ressourcer.

    Teknologier:

    • Teknologier:
    • Terraform Terraform
    • ETL ETL
    • Python Python
    • SQL SQL
    • Google Cloud Google Cloud
    • Bash Bash
    • Shell Shell
    • Linux Linux
    • Apache Airflow Apache Airflow
    • Dataflow Dataflow
    • Data Engineering

  • Data Engineer

    Inmarsat - 6 måneder

    • Brugte en kombination af EC2-instanser og kommandolinje til at SSH'e ind på lokale maskiner og overføre CSV'er til S3-bokse.
    • Erstattet Airflow med Prefect for at transformere data og optimere workflow management-processen.
    • Anvendt DBT og Jinja til at bygge test-scripts og konstruere data warehouse.
    • Brugt Terraform til programmatisk implementering af GCP-ressourcer.

    Teknologier:

    • Teknologier:
    • Terraform Terraform
    • Python Python
    • SQL SQL
    • AWS AWS
    • Bash Bash

  • Data Engineer

    LADbible Group - 1 år 1 måned

    • Brugt Apache Beam / Google Dataflow til at opbygge pipelines til batchbehandling.
    • Automatiserede flere ETL-pipelines, der udtrak data fra forskellige kilder, herunder cloud storage, Google Sheets og API'er, specifikt rettet mod Snapchat og annonceindtægtsdata med output til BigQuery-tabeller eller dashboards.
    • Sikrede, at koden var testbar ved at bruge Pytest og anvende en testdrevet udviklingstilgang (TDD).
    • Oprettet dashboards i Google Data Studio (GDS) og opsat alarmering i GCP for at overvåge datapipelines.
    • Brugt Terraform til at provisionere ressourcer på GCP.

    Teknologier:

    • Teknologier:
    • Terraform Terraform
    • ETL ETL
    • Python Python
    • SQL SQL
    • Google Cloud Google Cloud
    • AWS AWS
    • Bash Bash
    • Shell Shell
    • Linux Linux
    • Apache Airflow Apache Airflow
    • Dataflow Dataflow
    • Data Engineering

  • Data Analyst

    Publicis Media - 6 måneder

    • Skrev SQL-forespørgsler til dimensionel datamodellering i Power BI.
    • Brugte Python (Pandas) til at manipulere datasæt til eksport til Excel.
    • Oprettede skræddersyede Power BI-rapporter for at give klar og præcis indsigt i data.
    • Brugt DAX-sprog i Power BI til at transformere og beregne data.
    • Udført ETL af data fra forskellige kilder for at opbygge datamodeller, typisk i form af stjerneskemaer.
    • Hentede data fra forskellige kilder, skabte relationer mellem datasæt og modellerede data.

    Teknologier:

    • Teknologier:
    • Python Python
    • SQL SQL
    • Pandas Pandas
    • Microsoft Power BI Microsoft Power BI

  • Data Analyst

    Veolia - 1 år 5 måneder

    • Udnyttede en kombination af Power BI og SQL til at skabe datamodeller og udvikle indsigtsfulde rapporteringsvisualiseringer.
    • Byggede og tog ejerskab over Power BI-apps, overvågede og sikrede adgang for vigtige interessenter.
    • Anvendt DAX i Power BI til at skabe beregninger og målinger på dashboards.
    • Udviklet KPI-rapporter og dashboards i Excel ved hjælp af data, der er importeret og opdateret fra SQL-databaser.
    • Udtræk af data fra SQL og udførelse af analyser i Excel ved hjælp af avancerede formler og funktioner.
    • Skabte intelligente webapplikationer til operatører ved hjælp af data importeret til Esri ArcGIS.
    • Skrev effektive og komplekse SQL-forespørgsler med pivots, joins og indlejrede forespørgsler.

    Teknologier:

    • Teknologier:
    • SQL SQL
    • Data Engineering
    • Data Analytics
    • Microsoft Power BI Microsoft Power BI

Uddannelse

  • BSc.Business Administration, Management and Operations

    De Montfort University · 2009 - 2011

Find din næste udvikler inden for få dage, ikke måneder

Book en 25-minutters samtale, hvor vi:

  • udfører behovsafdækning med fokus på udviklingsopgaver
  • Forklar vores proces, hvor vi matcher dig med kvalificerede, godkendte udviklere fra vores netværk
  • beskriver de næste trin for at finde det perfekte match på få dage

Lad os snakke om det

I kan starte samarbejdet inden for få dage.