🏢 Sobre a empresa:

A Experian é uma empresa global de dados e tecnologia que atua em diversos mercados, como serviços financeiros e agronegócio, focada em liberar o poder dos dados para pessoas e empresas.

📋 Descrição e Requisitos:

🚀 Construção e manutenção de pipelines de ingestão utilizando Autoloader e Delta Lake.

🔹 Processamento de dados em larga escala usando Spark Structured Streaming e Spark SQL.

✅ Implementação de boas práticas de engenharia como particionamento e otimização de throughput.

🔸 Experiência sólida com Databricks para transformação e análise de grandes volumes de dados.

🛠️ Vivência em processos de ETL, modelagem de dados e integração entre diferentes fontes.

📈 Análise, melhoria e otimização de custos e performance no ecossistema Big Data.

🔗 Conhecimento em controle de versionamento com Git e fluxos de Pull Requests.

👉 Implementação de Data Quality e criação de documentação técnica clara.

🔗 Candidate-se aqui

#EngenhariaDeDados #Databricks #Python #Spark #VagaAfirmativa