- Desenvolvimento de Pipelines de Dados: Construi e mantive pipelines de ETL usando Python, Apache Spark e Azure Databricks, garantindo a extração, transformação e carga de dados de diversas fontes, integrando-os a um Data Lake.- Otimização de Processos de Dados: Implementei rotinas de limpeza e preparação de dados, eliminando duplicatas e corrigindo inconsistências para facilitar a análise.- Colaboração Multidisciplinar: Trabalhei em parceria com analistas e cientistas de dados para entender requisitos e fornecer dados estruturados, contribuindo para análises estratégicas.- Orquestração e Automação de Processos: Utilizei Apache Airflow para orquestrar e automatizar workflows de dados, integrando com o Azure Data Lake Storage.