Engenheiro de Dados Sênior

Na Stefanini, acreditamos no poder da colaboração. Co-criamos soluções inovadoras em parceria com nossos clientes, combinando tecnologia de ponta, inteligência artificial e a criatividade humana. Estamos na vanguarda da resolução de problemas de negócios, proporcionando impacto real em escala global.Ao se juntar à Stefanini, você se torna parte de uma jornada global de transformação. Estamos empenhados em criar impacto positivo não apenas nos negócios, mas também na vida de nossos colaboradores. Se você procura uma oportunidade de crescimento profissional em uma empresa que valoriza inovação, respeito, autonomia e parceria, você encontra aqui!Junte-se a nós e seja parte da mudança!#LI-REMOTE#LI-AS2

Responsabilidades e atribuições

Projetar, desenvolver, manter e otimizar pipelines de dados de média e alta complexidade

Construir soluções escaláveis para ingestão, transformação e processamento de grandes volumes de dados

Desenvolver soluções utilizando Python, SQL, Spark e PySpark

Criar, evoluir e otimizar soluções na plataforma Databricks

Atuar em arquiteturas de Data Lake, Lakehouse e Data Warehouse

Definir estratégias de particionamento, processamento distribuído e otimização de performance

Investigar e solucionar problemas críticos relacionados a processamento, integração e qualidade dos dados

Implementar mecanismos de observabilidade, monitoramento, alertas e controles de qualidade

Aplicar boas práticas de segurança, governança, privacidade e proteção de dados

Participar de decisões técnicas e da definição de padrões e boas práticas de desenvolvimento

Realizar code reviews, disseminar conhecimento e apoiar tecnicamente profissionais Pleno e Júnior

Interagir com as áreas de Arquitetura, Segurança, Infraestrutura, Desenvolvimento e Negócios

Apoiar estimativas técnicas, definição de escopo e planejamento das entregas

Contribuir para a evolução da maturidade técnica e operacional das soluções de dados.

Requisitos e qualificações

Experiência sólida em Engenharia de Dados

Experiência comprovada em soluções de alta complexidade e processamento de grandes volumes de dados

Conhecimento avançado em Python

Conhecimento avançado em SQL

Conhecimento avançado em Apache Spark/PySpark

Experiência com Databricks

Experiência com processos de ETL/ELT e processamento distribuído

Conhecimento em Azure Data Lake Storage — ADLS

Experiência com Azure Data Factory ou ferramentas equivalentes de orquestração

Conhecimento em bancos de dados relacionais e não relacionais — SQL e NoSQL

Experiência com arquiteturas de Data Lake, Lakehouse e Data Warehouse

Conhecimento de modelagem de dados

Experiência com Git e práticas de CI/CD

Conhecimento de APIs e integração entre sistemas

Conhecimento de segurança, governança e proteção de dados

Conhecimento de otimização e tuning de pipelines e processos de dados

Vivência em ambientes Cloud e com práticas de desenvolvimento, sustentação e operação de soluções críticas.Diferencial:Experiência com Delta Lake

Conhecimento em Databricks Workflows

Experiência com Unity Catalog

Conhecimento em tecnologias de streaming, como Kafka e Azure Event Hubs

Experiência com Terraform e práticas de Infrastructure as Code — IaC

Certificações Microsoft Azure ou Databricks

Experiência anterior no segmento financeiro ou bancário

Conhecimento de frameworks e ferramentas de observabilidade aplicados a dados.

Informações adicionais

🍛 Vale-alimentação ou vale-refeição

👨🏼‍🎓 Desconto em cursos, universidades e instituições de idiomas

📚 Academia Stefanini — plataforma com cursos on-line, gratuitos, atualizados e com certificado

🗣 Mentoring

💉 Clube de vantagens para consultas e exames

🏥 Assistência médica

🦷 Assistência odontológica

💰 Clube de vantagens e descontos nos melhores estabelecimentos

🛫 Clube de viagens

🐶 Convênio para pets.