Engenheiro de Dados / Analytics Engineer com foco em produtos de dados end-to-end — da arquitetura lakehouse à entrega de análises prontas para decisão corporativa. Como consultor (Ser Mais Digital), concebi e operei um produto de auditoria e simulação de vale-pedágio em Azure Databricks (Unity Catalog + Delta Lake) modelado com dbt, com pipelines orquestrados, Data Quality e governança ponta a ponta.
Também atuo em Engenharia de IA de produção: RAG avaliado com rigor estatístico, fine-tuning de LLM próprio (QLoRA + serving em vLLM), agentes (LangGraph) e MLOps com avaliação como gate de CI — provado de ponta a ponta no projeto RodoIA.
📍 São Paulo, Brasil • 🟢 Aberto a oportunidades de Data Engineering · Analytics Engineering · AI Engineering
|
🧱 oss-lakehouse — Engenharia de dados em Databricks/Azure, explicada e executada Lakehouse completo sobre eventos reais do GitHub (GH Archive, API REST e stream da Wikimedia) em 18 notebooks executados, apoiados num pacote Python testado: ingestão incremental, MERGE e SCD2, Structured Streaming, modelagem dimensional, qualidade e contratos, performance no Spark, Delta Lake por dentro, governança/LGPD, IA aplicada ao pipeline com avaliação, CI/CD com bundles e Terraform para Azure.
🔹 ▶ Guia de estudo · 199 perguntas respondidas, cada uma com a demonstração rodando |
|
|
🤖 RodoIA — AI Engineering ponta a ponta (open source) Do backprop escrito à mão ao serving em produção sobre dados públicos da ANTT: RAG avaliado + fine-tuning QLoRA + agente LangGraph + MLOps com gate no CI.
🔹 ▶ Demo ao vivo · retrieval E5 no navegador (R$0) |
Plataforma de dados open-source ponta a ponta que espelha em OSS a arquitetura que apliquei em produção.
🔹 ▶ Dashboard ao vivo · lineage no GitHub Pages |
|
🧠 Aira — SaaS de IA (produção na AWS) Projeto próprio em produção: ciclo completo de dados/backend. Backend assíncrono Python/FastAPI, PostgreSQL (multi-org, migração em produção sem perda), integração LLM (Anthropic Claude) com controle de custo, CI/CD com testes contra Postgres, SAST e segurança (CSP, masking de PII, auditoria hash-chain). |
Portfólio de ML aplicado: séries temporais, classificação, clusterização, NLP e visão computacional, com apps em Streamlit publicados na web. |
🌐 Portfólio completo · alanjoffre.github.io/my-profile
Linguagens & Dados
IA / LLM Engineering
Lakehouse & Data Engineering
Orquestração & DataOps
Cloud & Infra
Backend & Apps
