About Hamdi
J'aide les entreprises à livrer, à optimiser et à construire des produits data robustes et scalables sur les environnements cloud Azure, AWS, avec une forte expertise sur les data plateformes Databricks et Snowflake et les ETL tels que Azure Data Factory, Informatica et Talend.
French
Native or bilingual
English
Fluent
Can work on-site
Paris (up to 50km)
Experience
- Danone [Global]Tech Lead Ingénieur DataAGRICULTUREFebruary 2022 - Today (4 years and 4 months)FranceCONTEXTE :Migration de la plateforme CBI (Corporate Business Intelligence) d'une solution on-premise vers le Cloud et l'évolution de la plateforme.MISSION :
- Responsable de la conduite du processus d'inventaire des objets de données et des pipelines.
- Diriger le processus de reverse engineering et traceback pour générer les documents manquants dans le projet, tels que le document de transformation des données et le diagramme de dataflow.
- Diriger le choix de l'architecture cible et l'élaboration des documents d'architecture tels que high Level Architecture,...
- Traduire tous les pipelines legacy en pipelines cloud en commençant par l'ingestion de données brutes à l'aide d'Azure Data Factory à partir de SAP et de systèmes sources externes vers notre ADLS.
- Développer les notebooks sur Databricks en Python/Spark et SQL pour l'intégration des SSOT et la génération des datamarts sur notre datastore Snowflake.
- Responsable de la montée en compétence des ingénieurs juniors en supervisant le respect de l'application des meilleures pratiques de Danone à toutes les étapes du projet.
- Conduire le processus de maturation des nouveaux besoins métiers.
- Responsable du processus CI/CD en utilisant Github.
- Danone [Global]Ingénieur Data SéniorAGRICULTUREJune 2024 - August 2024 (2 months)FranceCONTEXTE :POC de l'architecture Medallion utilisant des delta tables Databricks pour remplacer Informatica cloud etSnowflake sur les flux d'entrepôt de données.MISSION :
- Responsable de la direction du développement de l'architecture Databricks Medallion et de tous les documents du projet.
- Développer les notebooks équivalents aux flux Informatica Cloud à l'aide des delta tables de Databricks.
- Orchestrer les pipelines Medallion pour qu'ils s'exécutent en parallèle avec les flux Informatica Cloud.
- Développer des tâches Event Hub et des notebooks de Spark Streaming pour ingester les journaux à partir des services de facturation Azure.
- Créer un tableau de bord Power BI comparatif des KPIs tels que les coûts et le temps d'exécution pour le même cas d'utilisation de warehousing entre les flux Informatica cloud/Snowflake et les flux Delta Table de Databricks.
- Danone [Global]Ingénieur Data SéniorAGRICULTUREFebruary 2022 - January 2023 (11 months)FranceCONTEXTE :Développer et maintenir la plateforme du cycle de vie et du procurement chargée d'ingérer les données globales de Danone, de fournir des DataMarts et des tableaux de bord liés au processus d'approvisionnement sur l'ensemble des systèmes de Danone (internes et partenariats).MISSION :
- Rédaction des documents techniques pour les projets tels que les documents de spécification, high-level architecture, les diagrammes de flux de données et les documents de modèle de données…
- Pilotage du processus de préparation de l'environnement avec les ingénieurs cloud Azure.
- Développement des pipelines de données d'ingestion à partir de systèmes sources internes et externes à l'aide d'Azure Data Factory, de SAP et d'ADLS (Azure Datalake Storage).
- Préparation des données SSOT à partir des données brutes ingérées en développant des notebooks en Pyspark sur Azure Databricks et Snowflake comme data store.
- Traduction de toutes les règles métier sous forme de transformations de données en datamarts à l'aide de notebooks pyspark sur Databricks.
- Création d'un dictionnaire de données pour faciliter le mapping des données, vu que nous traitions des données hétérogènes provenant de différents partenaires à travers le monde.
- Préparation et pilotage des processus de test unitaire, d'intégration et de la qualité des données.
Recommendations
Be the first to recommend Hamdi
Help this freelancer shine by sharing your experience working together.
These freelancer profiles also match your criteria
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Education
- Diplôme National d'ingénieur en InformatiqueUniversité des Sciences2013Diplôme National d'ingénieur en Informatique
Certifications
- Databricks Data Engineer ProfessionalDatabricks2025
- SnowPro Core CertificationSnowflake2025