Em meu papel como Profissional de Dados, tenho desempenhado um papel crucial na equipe, contribuindo significativamente para a construção e otimização dos pipelines de dados no ambiente Azure Data Factory. Minha atuação abrange todas as fases vitais do processo, desde a etapa inicial de Stage até a fase final de Refined.Minhas principais responsabilidades incluem a arquitetura e implementação de pipelines de dados, onde utilizo Python e Pandas para assegurar a integridade e qualidade dos dados processados. Destaco-me na coordenação efetiva das tarefas e processos utilizando Apache Airflow, otimizando a execução e monitoramento das operações diárias de forma eficaz.Minhas habilidades avançadas em PySpark têm sido essenciais para o processamento eficiente de grandes conjuntos de dados distribuídos, garantindo a escalabilidade das operações em ambientes de Big Data. A utilização estratégica do Databricks como parte integrante das soluções tem sido uma prática recorrente, aproveitando sua escalabilidade e recursos avançados para otimizar operações em larga escala.Na visualização de dados, destaco-me na criação de dashboards informativos no Power BI, aplicando as linguagens DAX e PowerQuery para extrair insights valiosos de conjuntos de dados complexos. Esses dashboards têm sido ferramentas fundamentais para fornecer à equipe e à organização uma visão clara e acionável dos dados.Minha especialização em modelagem dimensional, utilizando esquemas Star e Snowflake, tem sido um diferencial, maximizando a eficácia na organização e recuperação de dados. Ao longo de minha trajetória, liderei projetos que resultaram em operações mais eficientes e insights valiosos para a organização.A integração eficaz de tecnologias como Azure Data Factory, Databricks, Apache Airflow e PySpark tem sido crucial para o sucesso desses projetos.