Tadeu Pan Email & Phone Number

State Of São Paulo, Brazil

São Paulo, Brasil

Lider técnico do time de Google. Responsável técnico por todo o desenvolvimento e implantação em ambientes GCP.

São Paulo

Criação de ambiente de datalake e consultas externas.O ambiente foi criado utilizado azure data factory e databricks.Criamos notebooks no databricks que realiza algumas transformações no dado e aplica uma rotina de criptografia no dado a nivel de linha e o armazena em parquet.A chave de criptografia é rotacionada e tem validade de dois meses então também foi criado uma forma de identificação automatica de dado e chave para automatizar a descriptografia do dado quando o mesmo fosse utilizado por um cliente externo.Os dados foram escritos utilizando dois fluxos, um streaming e um batch mas ambos com as mesmas funções e bibliotecas.O pipeline de dados foi orquestrado pelo azure data factory e os dados foram armazenados em formato delta table n azure storage account

São Paulo, Brasil

Migração / Adaptação de um sistema de gerenciamento de IOT do Azure para o GCP.No Azure é utilizado o IOT-HUB e o GCP possui o IOT-CORE que foi descontinuado.Então o sistema teve que ser remodelado seguindo as mesmas premissas.Todo o sistema de gerenciamento que fica na web foi criado em containers para rodar no Kubernetes. Cada tipo de microservico necessário para a navegação na pagina, para configurar algum device, para cadastro de usuarios ou dispositivos... cada um tem um microservico no kubernetes separado por namespace.Para Controlar o dispositivo IOT foi criado um código .sh e uns scripts python que são adicionados como serviços, compativel com sistemas baseados em debian e ubuntu. O script .sh cuida do download dos arquivos necessários e a configuração dos códigos python como serviço linux.

São Paulo, Brasil

Elaboração de arquitetura e códigos para sistema de devops para machine learning.Criação de um esquema padrão utilizado para a criação de novos projetos de ML com o cookiecutter.Utilização do Vertex e do Databricks para a parte de ML e o Google Cloud para suportar a infra.Criação de rotina de pesquisa de dados no databricks para consulta do Firestore.

São Paulo, Brasil

Elaboração de processo de criação e atualização de feeds para o Facebook e o Google via arquivos XMLOs arquivos são criados com informações existentes no Google Bigquery que são ingeridas no Bigquery via API do Google ADs. A rotina de leitura de informação e criação do arquivo foi escrita em python.Configuração de schedule que inicia e termina a vm para criação dos arquivos.

São Paulo, São Paulo, Brasil

Elaboração de Pipeline de dados utilizando pyspark, airflow e amazon Emr. Ingestão de dados oriundos de base de dados Oracle e armazenamento em camadas Raw em formato CSV, Bau, Trusted, Refined em formato parquet particionado no Amazon S3 e posteriormente para o RedshiftTransformação dos dados realizada com Pyspark.Carga histórica de dados do Oracle para o S3 e para o Redshift utilizando pyspark.

São Paulo, Brasil

Recebimento de dados via Kafka, processamento e aplicação de regras de negócios com pyspark, armazenamento no Google Storage e Google BQ. Data quality das informações usando databricks para integrar e comparar as informações de origem e destino. Desenvolvimento de rotinas em batch usando pyspark para processamento das informações. Desenvolvimento de DAGs (Apache Airflow) para executar as tarefas. Versionamento dos códigos via Gitlabs Ferramentas utilizadas: Sql Server, Databricks, Google Cloud Plataform(Storage e BigQuery), Jupyter Notebook, Visual Studio Code, Gitlabs, Pyspark, Apache Airflow.

São Paulo E Região, Brasil

Construção de data lake, data warehouse utilizando talend, rotinas em python e pyspark para captura e tratamento de informações. Plataforma web desenvolvida em django para operacionalizar o ambiente e Apache Airflow para agendar as rotinas automáticas de processamento. Ambiente configurado no google cloud plataform. As linguagens e ferramentas utilizadas até o momento são: Python, Pyspark, Java, Pandas, SQL(querys e views), Google Cloud Plataform(Storage, Kubernets, Dataproc, Bigquery, Vm Engine, Firewall, SQL Cloud, Data Studio) MongoDB, Mysql, Talend, Dremio, Linux, Apache Airflow.

São Paulo E Região, Brasil

Análise e automatização de rotinas e processos existentes executadas em VBA e macros no Excel traduzindo essas rotinas e processos para aplicações desktop C#(Windows forms) mantendo um histórico de informações no SQL server. Criação de relatórios e views com as informações armazenadas no SQL server.As liguagens e ferramentas utilizadas foram: Microsoft Visual Studio 2012, Microsoft SQL Server, Microsoft SQL Server Management Studio, Microsoft Excel. C#, VBA, SQL(querys e procedures).

São Paulo

Desenvolvimento de Aplicações utilizando C# e Java para otimizar rotinas diárias de determinadas áreas visando aumentar a produtividade dos colaboradores e minimizar falhas na operação.Manutenção e implementação de novas features no ERP da empresa que foi escrito em VBA no Access.

atendimento help desk presencial.suporte a telefonia PABX.manutenção e configuração dos computadores.Configurar os para o trabalho para novos colaboradores e para os que mudaram de área.

*Coordenar filas de chamado.*Atendimento help desk nível 1,2 e 3. *atender os clientes respeitando o SLA.*Direcionar o chamado para o setor responsável.*Atualização de documentação.*Suporte em TI (software, hardware e infra)*Manutenção e configuração de computadores.