Engenheiro de Dados Cloud Sr

Sobre a vaga

Procuramos um Engenheiro de Dados Senior experiente em arquitetura e otimização de soluções de dados em ambiente cloud. Você liderará a implementação de pipelines complexos, garantindo escalabilidade, performance e qualidade dos dados.

Responsabilidades

• Arquitetar e implementar pipelines de dados resilientes em plataformas cloud (AWS, Azure, GCP)
• Otimizar jobs Spark e PySpark para máxima performance
• Gerenciar catálogos de dados e metadados com Unity Catalog
• Colaborar com times de analytics e engenharia para definir padrões de dados
• Revisar código e mentorear engenheiros junior
• Garantir segurança, conformidade e qualidade dos dados

Requisitos

• 5+ anos de experiência em engenharia de dados
• Proficiência em Python, Spark e PySpark
• Experiência sólida com pelo menos uma plataforma cloud (AWS, Azure ou GCP)
• Conhecimento de Databricks e arquitetura lakehouse
• Familiaridade com versionamento de código (GitHub) e CI/CD
• Experiência com Unity Catalog ou ferramentas similares de gerenciamento de metadados

Diferenciais

• Experiência com múltiplas plataformas cloud
• Conhecimento de GitHub Copilot ou ferramentas de IA para desenvolvimento
• Certificações em cloud (AWS, Azure ou GCP)
• Experiência com governança de dados e compliance