Promovido a Especialista em Dados Pleno- Projeto de Empresa da área de Finanças/VarejoCriação de Pipelines de ETL de Dados - Migração de Base de Dados para AWS RDS com Postgres com necesidade de modelagem dos dados para banco relacional - Implementação de processo de deploy usando CI/CD Jenkins - Implementação de monitoramento de processo de ETL usando Kibana/CloudWatch - Realização de Teste UnitáriosSkills: Databricks · MySQL · Data Modeling · SQL · Python · ETL (Extração… Show more Promovido a Especialista em Dados Pleno- Projeto de Empresa da área de Finanças/VarejoCriação de Pipelines de ETL de Dados - Migração de Base de Dados para AWS RDS com Postgres com necesidade de modelagem dos dados para banco relacional - Implementação de processo de deploy usando CI/CD Jenkins - Implementação de monitoramento de processo de ETL usando Kibana/CloudWatch - Realização de Teste UnitáriosSkills: Databricks · MySQL · Data Modeling · SQL · Python · ETL (Extração, transformação e carregamento) · Apache Spark · Data Engineering · Troubleshooting · Databases · Docker · Data Analysis · Big Data · PySpark · AWS Glue · Software Development · Jenkins · Amazon Web Services · Data Warehousing Show less

- Projeto de Empresa da área de Finanças/VarejoInternalização de Base de Dados de empresa terceira para AWS RDS com Postgres com necesidade de ETL e modelagem dos dados para banco relacional - Implementação de processo de deploy usando CI/CD Jenkins - Implementação de monitoramento de processo de ETL usando Kibana/CloudWatch - Realização de Teste Unitários - Projeto de Empresa especialista em análise do consumidorImplatação de automação de ingestão de dados em pipeline de ETL… Show more - Projeto de Empresa da área de Finanças/VarejoInternalização de Base de Dados de empresa terceira para AWS RDS com Postgres com necesidade de ETL e modelagem dos dados para banco relacional - Implementação de processo de deploy usando CI/CD Jenkins - Implementação de monitoramento de processo de ETL usando Kibana/CloudWatch - Realização de Teste Unitários - Projeto de Empresa especialista em análise do consumidorImplatação de automação de ingestão de dados em pipeline de ETL - Prática de processo de ETL para datalakes, datamesh, delta lakes (Pyspark/SQL) - Criação e Manutenção de Processo de CI/CD com Gitlab CI/CD - Apache AirFlow, Docker, SQL, Ambiente GCP (Firebase, Dataproc, Compute Engine, Cloud Run, BigQuery) - Análise e acompanhamento de custo do GCP - Billing GCP - Criação de relatórios em dashboards com Looker Studio (Data Studio) Show less