👋 Bem-vindo(a) ao meu perfil!📚 Estudando atualmente: • Sistemas de Informação - Estácio (Último Período)• Estudante de: Engenharia de Dados, Data Lakes, Pipelines de Dados, e Ferramentas de Nuvem (Azure, Databricks) • Estudante de: Python, Flask, APIs, Automação de Dados, e Streaming de Dados💼 Trabalho atual: Atualmente, sou Engenheiro de Dados na MedSênior, onde sou responsável por desenvolver e otimizar pipelines de dados, garantindo a ingestão e estruturação eficiente de grandes volumes de dados em nosso Data Lake Corporativo. Atuo em diversas etapas do ciclo de vida dos dados, desde a extração de múltiplas fontes (APIs, Kafka, bancos de dados, arquivos CSV, JSON, entre outros) até a validação e sustentação de pipelines em produção, utilizando ferramentas como Azure Data Factory e Databricks. Também participo na criação e manutenção de APIs em Flask para suportar processos de ingestão e automação de dados.Funções e Responsabilidades:Construção de Pipelines de Dados: Desenvolvimento de pipelines desde a extração de fontes diversas (bancos de dados, APIs, Kafka, arquivos CSV/JSON/XML) até a ingestão no Data Lake.Azure e Databricks: Utilizando Azure Data Factory e Databricks para desenvolvimento e otimização de pipelines.Catalogação e Controle de Qualidade: Garantia da integridade e consistência dos dados através de controles de qualidade.Implantação e Validação: Acompanhamento da implantação em produção e validação dos pipelines.Sustentação Pós-Implantação: Suporte contínuo aos pipelines em produção.Desenvolvimento de APIs: Criação e manutenção de APIs em Flask para automação de dados.QUALIFICAÇÕESEngenharia de Dados (Pipelines, Data Lakes, Processamento em Lote e Streaming)Python (Automação, Consumo de APIs, Flask, Análise de Dados)Ferramentas de Nuvem (Azure Data Factory, Databricks)Desenvolvimento Full Stack (Django, Flask, HTML, CSS, APIs)Conhecimento em Banco de Dados (SQL Server, Oracle, DB2, MySQL)Experiência com Streaming de Dados (Kafka, APIs)ITIL Foundation (Gestão da Biblioteca de Infraestrutura de TI)Experiência com Servidores e Sistemas Operacionais (Linux e Windows)Suporte e Análise de Sistemas (ERP, Chatbots)Redes e Segurança (Firewall, Nginx, Greylog, Linux)
Listed skills include Computer Hardware, Software Installation, Operating Systems, Linux Server, and 3 others.
