Engenheiro de Dados com 11 anos de experiência em Big Data e Business Intelligence, especializado em integração de APIs e automação de processos de dados. Expertise em plataformas de nuvem como Azure e AWS, com foco em Databricks e Pipelines de Dados para ETL. Habilidades incluem:Plataformas e Ferramentas: Azure Data Factory, Databricks, Azure Synapse Analytics, Azure Data Lake, AWS (Redshift, Athena, S3), PySpark, Apache NiFi.Integração e Web-Scraping: Coleta e automação de dados com Python, Selenium e WebDriver.Otimização de Dados: Queries complexas, procedures e functions para transformação de dados.Big Data Analytics: Armazenamento e curadoria de dados com Synapse, Redshift e PySpark.Cubos OLAP e Automação: Desenvolvimento de cubos OLAP e automação de datasets no Power BI.Integração de APIs: Integrações REST via scripts em Python e automação em Databricks.Governança e Automação: Elaboração de scripts de instalação e governança em Azure PowerShell.
Listed skills include Microsoft Sql Server, Sql, Uml, Oracle, and 8 others.