Sridhar V.
Data Engineer
Sridhar est un ingénieur de données avec plus de 11 ans d'expérience, spécialisé dans l'intégration de données, l'ingénierie Big Data, la Business Intelligence et les technologies Cloud.
Son expertise porte sur l'extraction et le traitement des données, ainsi que sur l'élaboration de modèles d'apprentissage automatique, ce qui lui permet de prendre des décisions efficaces fondées sur les données dans le cadre de diverses fonctions, notamment celles d'ingénieur en données, d'analyste et de développeur en informatique décisionnelle.
En plus de son expertise technique, il est très compétent dans la création de tableaux de bord interactifs et de visualisations à l'aide de Power BI et de Tableau, qui aident à communiquer efficacement les informations sur les données. Connu pour son approche collaborative, Sridhar respecte toujours les délais impartis, ce qui fait de lui un atout fiable pour n'importe quelle équipe.
Principale expertise
- Apache Spark 5 ans
- Azure Data Factory 4 ans
- CSV 11 ans
Autres compétences
- Tableau 3 ans
- Git 3 ans
- Azure Synapse 2 ans
Expérience sélectionnée
Emploi
Senior Consultant
Capgemini - 6 années 7 mois
- A dirigé avec succès la migration des pipelines ETL de SSIS vers Azure Data Factory (ADF), en assurant une transition en douceur et en améliorant les processus d'intégration de données ;
- Utilisation des notebooks Databricks avec PySpark et SparkSQL pour analyser efficacement les données, permettant une prise de décision perspicace basée sur les données ;
- Développement de notebooks Azure Databricks pour récupérer des données à partir de diverses API sociales, y compris FB, Twitter, YouTube et Google Analytics ;
- Automatisation du processus ETL pour le chargement des données historiques à partir des API FB et Instagram, ce qui a entraîné un gain de temps significatif de 500 heures en éliminant les efforts manuels ;
- Construire des pipelines ADF pour exécuter des pipelines Databricks sur une base planifiée, assurant un traitement de données précis et en temps voulu ;
- Création de flux de données à l'aide des pipelines ADF V2, facilitant la transformation et l'intégration transparentes des données ;
- Identifier et résoudre les problèmes signalés par les applications en aval, en veillant à l'intégrité des données et à la fluidité du flux de données ;
- Automatisation du processus de chargement des données, réduisant les interventions manuelles et améliorant l'efficacité ;
- Amélioration des performances de chargement des données à partir des API, mise en œuvre de stratégies visant à optimiser la récupération et le traitement des données pour les applications en aval ;
- Exploitation des tables Delta dans Databricks pour effectuer des opérations d'upsert, en garantissant la cohérence et l'intégrité des données.
Les technologies:
- Les technologies:
Azure Data Factory
Azure Synapse
Lead IT
Deloitte India (Offices of the US) - 3 mois
- Démontrer de solides compétences analytiques en comprenant les documents de spécification des besoins et en développant des requêtes SQL en conséquence ;
- Développement de procédures stockées efficaces et optimisées basées sur les exigences, assurant un traitement et une récupération adéquats des données ;
- Nous avons mené une étude de faisabilité (POC) pour évaluer la faisabilité et les avantages de la migration de la solution existante vers Azure, en fournissant des informations précieuses pour la prise de décision ;
- Identifier et mettre en œuvre des améliorations de performance dans les procédures stockées et les fonctions SQL existantes, en améliorant la vitesse d'exécution des requêtes et l'efficacité globale du système ;
- Conception et création d'un package SSIS (SQL Server Integration Services) réutilisable pour charger les données de manière itérative, en rationalisant le processus de chargement des données et en améliorant les capacités d'intégration des données.
Senior Software Engineer
Hilti Asia IT Services - 1 an
- Construire un entrepôt de données basé sur Azure et une plateforme de base de données pour permettre une analyse et une prise de décision rapides.
- Gestion des processus ELT, extraction des données de SAP HANA, SAP BW, et SAP ERP pour l'intégration dans la base de données.
- Utilisation de Power BI pour la visualisation des données, fournissant des informations précieuses à partir d'ensembles de données extraits.
- Conception et optimisation de modèles et de structures de données pour un stockage et une récupération efficaces.
- Assurer la qualité des données par des processus de nettoyage, de transformation et d'enrichissement.
- Contrôler et dépanner les performances des bases de données, en résolvant les problèmes de manière proactive.
- Collaborer avec les parties prenantes pour rassembler et répondre aux exigences en matière de rapports et d'analyse.
- S'est tenu au courant des tendances du secteur et a intégré de nouvelles technologies pour améliorer les capacités d'analyse des données.
Les technologies:
- Les technologies:
Azure Data Factory
Azure Synapse
IT Analyst
Tata Consultancy Services - 5 années 6 mois
- Développement de packages ETL en SSIS pour une extraction, une transformation et un chargement efficaces des données ;
- Recueillir les exigences des parties prenantes afin de garantir une compréhension claire des besoins de l'entreprise ;
- Conception et construction de cubes SSAS tabulaires et multidimensionnels pour une analyse complète des données ;
- Création de rapports et de tableaux de bord Power BI visuellement attrayants pour fournir des informations précieuses ;
- Profilage et nettoyage des données afin de maintenir la qualité et l'intégrité des données ;
- Optimisation des performances des packages ETL, des cubes SSAS et des rapports Power BI ;
- Mise à jour des dernières technologies ETL, SSAS et Power BI ;
- Fournir des conseils et un soutien aux membres juniors de l'équipe ;
- Collaborer avec les parties prenantes pour comprendre l'évolution des besoins de l'entreprise et apporter les ajustements nécessaires aux processus ETL, aux cubes SSAS et aux rapports Power BI.
Éducation
FormationData Analyst
Udacity · 2017 - 2018
License ès sciencesElectronics and communication Engineering
Gandhi Institute of Engineering and Technology · 2007 - 2011
Trouvez votre prochain développeur en quelques jours et non sur plusieurs mois
Dans un court appel de 25 minutes, nous voulons:
- Comprendre vos besoins en développement
- Vous expliquez comment nous allons vous mettre en relation avec le développeur le mieux qualifié pour votre projet, sélectionné avec soin
- Vous indiquez nos prochaines démarches afin de vous trouver le meilleur développeur, souvent en moins d'une semaine