Data Engineer
Current• Migration des processus ETL d'une solution obsolète vers AWS Glue avec PySpark.• Extraction de données depuis diverses sources (bases de données Oracle, fichiers CSV, TXT) pour les processus ETL.• Conception et développement de transformations de données complexes en utilisant AWS Glue et PySpark.• Intégration des résultats des processus ETL dans un entrepôt de données (Data Warehouse) pour la création de dashboards de reporting, améliorant les processus de prise de décision.• Analyse des données pour identifier les incohérences et anomalies, et améliorer la qualité des résultats.• Développement et automatisation des déclenchements des tâches ETL via AWS Lambda.• Collaboration étroite avec les équipes clients pour comprendre leurs besoins et fournir des solutions adaptées.• Assurance de la qualité, de la fiabilité et de la performance des solutions développées.*** Environnement technique : AWS Glue, Pyspark, SQL, Oracle BDD, PowerBi, Python, Pandas, IBM Cognos Analytics, Snowflake.