Michael Barbosa Santos

Senior Data Engineer | Spark, dbt, Airflow, Terraform | AWS, Azure, GCP | Lakehouse, Streaming, Analytics

• Localização: João Pessoa, Brasil
• Email: eng.michaelbarbosa@hotmail.com
• LinkedIn: https://www.linkedin.com/in/michael-bs/
• GitHub: https://github.com/michael-eng-ai

Resumo

Engenheiro de Dados Sênior com experiência em desenhar e operar plataformas de dados em nuvem em AWS, Azure e GCP. Forte atuação com Spark/PySpark, SQL, dbt, Airflow, Terraform, Kafka e modelagem dimensional, com foco em pipelines escaláveis, analytics enablement, governança e arquitetura de dados pronta para produção.

Stack Principal

• Spark e PySpark
• SQL
• dbt
• Airflow
• Terraform
• Kafka
• AWS, Azure e GCP
• Modelagem de dados
• Pipelines batch e streaming
• Data quality e governança

Experiência Recente

Five Acts | Engenheiro de Dados | 2024 - Atual

• Desenho e implementação de fluxos de plataforma de dados em AWS usando Spark, Glue, S3, Athena, Airflow, EMR, Lambda e API Gateway.
• Atuação em cenários de migração de Snowflake para data lake em AWS integrando MongoDB, APIs e Kafka.
• Migração de processos analíticos de Qlik Sense para Databricks em Azure usando Python, SQL e Spark.

Act Digital | Engenheiro de Dados | 2023 - 2024

• Suporte à migração de workloads de Azure e Databricks integrados com Data Factory, serviços GCP e dbt para investigação de fraude bancária.
• Construção de fluxos de dados entre SQL Server e MongoDB para Oracle usando Kafka, Python e PowerCenter.

Vert | Engenheiro de Dados | 2022 - 2023

• Construção de pipelines ETL em PySpark em ambiente Cloudera.
• Automação de processos regulatórios financeiros em GCP usando Dataform, BigQuery e Dataflow.

Projetos Em Destaque

• kafka-debezium-dbt
• aws-databricks-lakehouse
• gcp-dbt-modern-data-stack
• azure-snowflake-pipeline
• streaming-kafka-fastapi
• AI-Data-Analyst-Bot