Profile picture of Igor Beduschi
Olá, eu sou Igor Beduschi!

Engenheiro de Dados. Construo pipelines de ETL em produção de ponta a ponta, com Python, SQL, Airflow e Spark, transformando dados volumosos e bagunçados em sistemas confiáveis.

Da ingestão (incluindo web scraping) e orquestração até a transformação e entrega em Delta Lake. Tudo com testes, observabilidade e código limpo e fácil de manter desde o começo.

Git
Next.js
JavaScript
AWS
Linux
Docker
Tailwind
SQL
Postgresql
Python
Pandas
Pytorch
Fastapi
Airflow
Scikitlearn
PowerBI
Excel

Sobre Mim

_

Sou um Engenheiro de Dados que gosta de transformar dados volumosos e bagunçados em sistemas em que as pessoas podem confiar. Construo pipelines de ETL em produção de ponta a ponta: ingestão (incluindo web scraping), orquestração com Airflow, transformação em Python e entrega em Delta Lake. Também cuido das partes que mantêm os dados confiáveis: testes, observabilidade e código limpo e fácil de manter. Vim do desenvolvimento full-stack antes de ir para dados, então me sinto tão à vontade entregando um dashboard em Django quanto ajustando uma DAG. Pra mim, boa tecnologia é acessível e transparente: resolve problemas de verdade pra quem usa, não só no papel.

Experiência

  1. Logo of One Investimentos | Engenheiro de Analytics de Dados

    One Investimentos | Engenheiro de Analytics de DadosMais Recente

    • Projeto e mantenho ~30 pipelines de ETL em produção rodando diariamente (DAGs do Airflow) em Python, entregando dados confiáveis e prontos para análise em Delta Lake.
    • Ajudei a definir os padrões de observabilidade do time de dados (Grafana, Loki, VictoriaMetrics) e a adoção de Polars em uma equipe de 4 pessoas.
    • Reduzi o pico de uso de memória de um pipeline em ~97% (de 16 GB para menos de 500 MB) com processamento eficiente em memória (Polars/DuckDB), cache e limites de recursos.
    • Refatorei código legado para Polars e Django e construí ferramentas internas de LLM (custom Claude skills) para padronizar os fluxos do time.
    • Implementei testes de qualidade de dados (validação de schema e regras de negócio) e testes unitários para componentes centrais de ETL, prevenindo regressões nas atualizações.
  2. Logo of Oncoclínicas | Analista de Dados

    Oncoclínicas | Analista de Dados

    • Desenvolvi processos ETL para integrar e limpar conjuntos de dados, melhorando a agilidade das operações internas.
    • Utilizei Python e suas bibliotecas de processamento de dados para automatizar fluxos e transformar dados brutos em insights acionáveis.
    • Forneci suporte analítico e criação de dashboards com Power BI e Excel, auxiliando stakeholders de diferentes equipes.
    • Contribuí ativamente para uma cultura data-driven, engajando usuários não técnicos, promovendo a literacia de dados e incentivando decisões informadas em toda a organização.
  3. Logo of Banco Mercantil | Analista de Dados

    Banco Mercantil | Analista de Dados

    • Construí processos de ETL para integração e limpeza de dados em Python, melhorando a confiabilidade dos dados e a eficiência do departamento.
    • Automatizei rotinas internas recorrentes, reduzindo o esforço manual e agilizando a geração de relatórios.
    • Desenvolvi dashboards interativos (Python, Power BI) para tornar as análises acessíveis a times não técnicos.
  4. Logo of Inter | Tradutor de Dados

    Inter | Tradutor de Dados

    • Apoiei a governança de dados entre times, garantindo conformidade, consistência e dados de alta qualidade para projetos data-driven.
    • Utilizei o IBM Data Catalog para organizar, classificar e manter metadados, melhorando a descoberta e a governança dos dados.
    • Redigi documentação técnica e especificações funcionais para novas iniciativas de dados, mantendo alinhados os requisitos técnicos e de negócio.
    • Contribuí para pipelines de dados e estruturas de lake/warehouse na AWS (S3, EC2, Athena) com Python, SQL e Spark, e criei dashboards no Tableau.
  5. Logo of Syngenta Digital | Desenvolvedor

    Syngenta Digital | Desenvolvedor

    • Colaborei em equipes ágeis para desenvolver soluções web escaláveis com ReactJS, TypeScript e JavaScript.
    • Implementei e mantive funcionalidades com foco em performance e usabilidade em ambientes em nuvem (AWS).
    • Escrevi testes unitários com Jest para garantir confiabilidade e manutenibilidade do código.
    • Participei do controle de versão com Git e acompanhamento de projetos com Trello, contribuindo para colaboração eficaz e entrega contínua.
  6. Logo of 2x3 | Desenvolvedor

    2x3 | Desenvolvedor

    • Trabalhei em desenvolvimento full-stack com PHP, Ruby on Rails, JavaScript e MySQL em diversos projetos de clientes.
    • Gerenciei tickets de suporte, entregando soluções técnicas e mantendo boa comunicação com os stakeholders.
    • Participei do versionamento de código com Git, gerenciamento de projetos com Trello e deploy com Docker.
    • Também realizei manutenção de servidores web em ambientes com AWS e Apache.
  7. Logo of Prodemge | Suporte Técnico

    Prodemge | Suporte Técnico

    • Forneci suporte técnico e manutenção de infraestrutura, incluindo configuração e testes de sistemas de clientes.
    • Participei de testes manuais de ferramentas internas e suportou aplicações envolvendo certificação digital.
    • Auxiliei na elaboração de planos de teste e relatórios de desempenho de sistemas, contribuindo para a confiabilidade e eficiência de serviços críticos.

$ echo "vamos falar de dados? me chama"

Made with 🤍 by Igor Beduschi