Ingénieur De Données Et Développeur Web
Le projet vise à développer une plateforme low-code permettant aux utilisateurs, y compris ceux ayant peu de compétences techniques, d'automatiser les étapes clés du cycle de vie des données : de l'ingestion à la transformation, la modélisation, et l'évaluation. Le tout s'appuie sur une architecture moderne de data lakehouse qui combine les avantages des data lakes et des data warehouses pour une gestion efficace des données structurées et non structurées.Taches réalisées : - Mise en place d'une fonctionnalité d'importation et d'exportation des données dans plusieurs formats. - Conception d'outils de nettoyage et de création de nouvelles colonnes via une interface graphique. - Implémentation de modules pour sélectionner, entraîner et sauvegarder des modèles. - Développement de visualisations interactives et calculs de métriques de performance. - Ajout de graphiques pour expliquer les résultats des modèles (matrices de confusion). - Intégration de boxplots et scatterplots pour identifier les anomalies et distribuer les données. - Développement d'une fonctionnalité pour appliquer des modèles entraînés sur de nouveaux jeux de données.