Marwin T.

Data Engineer

Marwin is an experienced Data Engineer with nearly five years of commercial experience, specializing in building and maintaining scalable data infrastructure on cloud platforms such as Google Cloud Platform (GCP) and Amazon Web Services (AWS).

He has deep expertise in designing and optimizing ETL/ELT pipelines, orchestrating workflows, and developing cloud-based architectures for data lakes and data warehouses.

Marwin has successfully led multiple cloud migration projects, including the end-to-end migration of a data engineering team’s workflows from AWS Elastic Beanstalk to Apache Airflow on GCP Composer. He has also designed and implemented full reporting pipelines using geospatial data to track and analyze store visits, enhancing business insights and decision-making.

Marwin combines strong technical capabilities with a strategic approach to data engineering, making him a valuable asset for data-driven organizations seeking to modernize and scale their infrastructure.

Hauptkompetenz

  • Python
    Python 5 Jahre
  • SQL
    SQL 5 Jahre
  • Scala
    Scala 5 Jahre

Andere Fähigkeiten

  • MySQL
    MySQL 5 Jahre
  • Kubernetes
    Kubernetes 5 Jahre
  • Java
    Java 4 Jahre
Marwin

Marwin T.

Bolivia

Erste Schritte

Ausgewählte Erfahrung

Beschäftigung

  • senior data engineer

    global extension - 6 jahre 2 monate

    • Maintained the pipelines for the datalake and warehouse

    • Created new ETLs and ELTs for reporting purposes in the warehouse.

    • Migrated data from cloud to cloud

    • Optimization of SQL and spark code

    • Design workflows and manage small teams.

    Technologien:

    • Technologien:
    • PostgreSQL PostgreSQL
    • AWS AWS
    • Apache Spark Apache Spark
    • Python Python
    • AWS SQS AWS SQS
    • Kubernetes Kubernetes
    • SQL SQL
    • AWS Lambda AWS Lambda
    • AWS S3 AWS S3
    • Scala Scala
    • Google Cloud Google Cloud
    • BigQuery BigQuery
    • ELT
    • Apache Airflow Apache Airflow
    • ETL ETL
    • AWS VPC AWS VPC
    • AWS EC2 AWS EC2
    • Hadoop Hadoop
    • Redshift Redshift
    • dbt dbt

Ausbildung

  • BSc.software engineer

    UPB · 2016 - 2020

Finden Sie Ihren nächsten Entwickler innerhalb von Tagen, nicht Monaten

In einem kurzen 25-minütigen Gespräch würden wir gerne:

  • Auf Ihren Bedarf bezüglich des Recruitments von Software-Entwicklern eingehen
  • Unseren Prozess vorstellen und somit wie wir Sie mit talentierten und geprüften Kandidaten aus unserem Netzwerk zusammenbringen können
  • Die nächsten Schritte besprechen, um den richtigen Kandidaten zu finden - oft in weniger als einer Woche

Unterhalten wir uns