🏢 Sobre a empresa:

A contratante é uma organização do setor de investimentos que está desenvolvendo uma plataforma Lakehouse inovadora do zero, com foco em arquitetura robusta e escalabilidade.

📋 Descrição e Requisitos:

🚀 Arquitetar e implementar a transição de Data Lake para Lakehouse utilizando Apache Iceberg.

🔹 Construir a camada de transformação analítica com dbt para consumo em camada Gold.

⚙️ Otimizar pipelines Spark em ambiente EMR para processamento de grandes volumes de dados.

🌪️ Orquestrar fluxos de dados críticos através do Apache Airflow.

🔍 Habilitar consultas federadas eficientes via Trino e Athena.

📊 Implementar observabilidade estratégica e governança de custos de infraestrutura.

🐍 Desenvolver serviços e integrações em Python (FastAPI) com provedores externos.

📡 Trabalhar com streaming via Kafka e captura de mudanças de dados (CDC).

💡 Experiência sólida na estruturação ou evolução de plataformas de dados complexas.

✅ Vivência real e comprovada com Iceberg e dbt em ambiente de produção.

🛠️ Conhecimento técnico em AWS (S3, Glue, Lambda, RDS), Docker e Kubernetes.

🧠 Capacidade de atuar com alta autonomia e visão estratégica de custos.

🔗 Candidate-se aqui

#EngenhariaDeDados #DataEngineer #AWS #Lakehouse #VagaRemota