Daniel Lavedonio de Lima

Outras informações:
Trabalhando como consultor alocado em um dos clientes da empresa, além de ser um dos responsáveis pela avaliação técnica de candidatos da área. Na empresa no qual estou alocado, trabalho no ambiente Google Cloud Platform (GCP) principalmente focado em Apache Airflow (Google Cloud Composer), modelagem de dados (DBT e BigQuery, usando SQL) e Compliance. Dos vários projetos internos que participei, destaca-se a migração e atualização do pipeline de dados (da AWS utilizando frameworks em Python para GCP usando SQL em cima da tecnologia DBT). Este resultou em uma melhora de eficiência na execução do pipeline na ordem de 5x, reduzindo consideravelmente o tempo de execução e os custos envolvidos no processo.

Outras informações:
Empresa criada para prestar serviços principalmente para a Jobsity, mas também em trabalhos pontuais (freelance) na área de dados e/ou tecnologia para outros clientes.

Outras informações:
Responsável por criar, manter e monitorar pipelines de dados que lidam com processos complexos e grande quantidade de processamento de dados. Também responsável por trazer melhorias para todos esses sistemas de forma a melhorar a capacidade do time, sem disrupção dos processos em andamento. Ferramentas de uso contínuo para a execução dessas atividades incluem, nestas categorias: - ETL: Apache Airflow; - Streaming de dados: Apache Kafka; - Processamento de dados: Apache Hive, Apache Hadoop e Apache Spark (PySpark); - Data crawling: Scrapy (Python); - Visualização de dados: Metabase; - Linguagens de programação: Python e SQL; - Serviços de nuvem: AWS (S3, RDS, EMR e EC2).

Outras informações:
Responsável por garantir a integridade, robustez e segurança do sistema de ETL e do Data Warehouse (DW) no Google Cloud Platform (GCP). Também responsável por automatizar a geração e acompanhar dashboards de monitoramento no Grafana, além de automatizar processos utilizando o GitHub Actions.

Outras informações:
Responsável por coordenar e realizar manutenção do processo de ETL via Airflow, garantindo a consistência e o fluxo constante de dados originários dos bancos de dados de produção do site e de outras fontes para o Data Warehouse (DW). Responsável pelo controle de acesso no DW e por análises e modelagem de dados mais complexas, aumentando a robustez do sistema e contando com uma visão holística dos processos, incluindo fluxos de dados que passam pelo AWS, bem como pelo Google Cloud Platform (GCP).

Outras informações:
Responsável pela criação, manutenção, automação e envio de relatórios gerenciais e operacionais para as mais diversas áreas da empresa. Ferramentas de uso contínuo para a execução dessas atividades incluem, nestas categorias: - ETL: Pentaho; - Manipulação e exibição de dados: Excel, Pandas (Python), Google Sheets, Metabase e serviços AWS (S3, Redshift e QuickSight); - Automação de execução de tarefas: Airflow; - Linguagens de programação: Python, JavaScript (Pentaho e Google Sheets), SQL e VBA (Excel); - Outras ferramentas: Git (controle de versão) e JIRA (gerenciamento de tarefas - metodologia Scrum).

Outras informações:
Como projeto principal de estágio, responsável por mapear indicadores que medissem a performance das diversas áreas da empresa (KPI's) e auxiliar na implementação de um novo sistema de BI que facilitasse a visualização e análise de dados gerenciais essenciais para a tomada de decisão de cada área. Outros projetos paralelos incluem: - Análise crítica sobre os diversos processos da empresa e entendimento dos gargalos; - Automação de relatórios manuais (Excel VBA); - Criação e automação de novos relatórios gerenciais (Excel VBA); - Auxílio na obtenção e manipulação de banco de dados (SQL); - Criação de um web scraper para montar uma base de aprovados (análise comparativa geral de performance) (Python).

Outras informações:
Atuação na área de Inteligência e Análise do Negócio. Responsável por desenvolver e automatizar relatórios gerenciais e monitoramentos do negócio utilizando os softwares Alteryx Designer e Microsoft Excel. Realização estudos específicos solicitados pelos departamentos de Operações de Loja, Comercial, Produtos e Serviços Financeiros, Marketing e E-commerce. Auxílio nas frentes de melhoria operacional e implementação de ferramentas de Big Data.