Engenheiro de Dados SR
Magazine Luiza
InHireDescrição da vaga
Descriç
ã
o do Cargo
Principais responsabilidades
Desenvolver, manter e otimizar pipelines de dados para ingestã
o, processamento, transformaç
ã
o e disponibilizaç
ã
o de informaç
õ
es.
Desenvolver consultas e scripts SQL avanç
ados para transformaç
ã
o, consolidaç
ã
o e processamento de grandes volumes de dados no Google BigQuery.
Construir e manter tabelas analí
ticas, estruturando dados de diferentes fontes para consumo por aplicaç
õ
es e sistemas internos.
Desenvolver processos automatizados de carga e atualizaç
ã
o de dados, incluindo rotinas incrementais, cargas histó
ricas e reprocessamentos.
Implementar e manter fluxos de processamento e dependê
ncias utilizando ferramentas de orquestraç
ã
o, como Apache Airflow.
Desenvolver scripts em Python para automaç
ã
o de rotinas, integraç
ã
o entre sistemas e processamento de dados.
Integrar diferentes fontes de dados, garantindo consistê
ncia, integridade e padronizaç
ã
o das informaç
õ
es.
Implementar mecanismos de validaç
ã
o, testes e monitoramento para identificar falhas, inconsistê
ncias e atrasos no processamento.
Investigar e corrigir problemas relacionados à
execuç
ã
o de pipelines, divergê
ncias de dados e falhas de integraç
ã
o.
Otimizar consultas, estruturas de tabelas e processos de processamento, buscando melhorar desempenho e reduzir custos computacionais.
Aplicar boas práticas de particionamento, clusterizaç
ã
o, versionamento de có
digo e organizaç
ã
o dos ativos de dados.
Desenvolver documentaç
ã
o té
cnica dos pipelines, tabelas, regras de transformaç
ã
o e dependê
ncias entre processos.
Contribuir para a evoluç
ã
o da arquitetura de dados, identificando oportunidades de automaç
ã
o, padronizaç
ã
o e melhoria contí
nua.
Garantir a confiabilidade e a disponibilidade dos dados utilizados pelos sistemas e processos da companhia.
Requisitos té
cnicos
Experiê
ncia só
lida em Engenharia de Dados e desenvolvimento de pipelines em ambientes produtivos.
Domí
nio de SQL avanç
ado e experiê
ncia com Google BigQuery.
Experiê
ncia com Python aplicado à
automaç
ã
o e ao processamento de dados.
Experiê
ncia com ferramentas de orquestraç
ã
o, preferencialmente Apache Airflow.
Conhecimento de modelagem de dados e estruturaç
ã
o de tabelas analí
ticas.
Experiê
ncia com processos ETL/ELT, cargas incrementais e reprocessamento de dados.
Conhecimento de otimizaç
ã
o de consultas, particionamento, clusterizaç
ã
o e controle de custos.
Experiê
ncia com versionamento de có
digo utilizando Git.
Conhecimento de testes, validaç
ã
o, monitoramento e tratamento de falhas em pipelines.
Capacidade de investigar problemas té
cnicos e implementar soluç
õ
es robustas e escaláveis.
Diferenciais
Experiê
ncia com ambientes de dados em nuvem, especialmente Google Cloud Platform.
Conhecimento de integraç
ã
o de APIs e ingestã
o de dados de plataformas externas.
Experiê
ncia com grandes volumes de dados e processamento de eventos.
Conhecimento de práticas de CI/CD e DataOps.
Experiê
ncia com governanç
a, catálogo e documentaç
ã
o de ativos de dados.
Modelo de Trabalho
Adotamos o modelo hí
brido de trabalho
&lsquo
&rsquo
Se você
busca um ambiente de crescimento e desafios, Vem ser feliz !"
Nossos valores nos unem e nossas diferenç
as nos potencializam como um grupo. Mais do que igualdade, buscamos equidade: Aqui, temos espaç
o para sermos autê
nticos, independentemente de gê
nero, etnia, raç
a, orientaç
ã
o sexual, clero ou deficiê
ncia.
Sobre a empresa
:
Uma plataforma digital, com pontos físicos e calor humano.
Esse é o Magalu. Somos uma empresa brasileira, que desenvolve tecnologia e que tem o varejo na alma. Contamos com mais de 1.300 lojas espalhadas por todo o Brasil que integram o ecossistema Magalu. Todas elas são digitalizadas, pois acreditamos que revolucionar a experiência de compra é a melhor maneira de perpetuar a importância do contato físico.
Com a nossa metodologia do Atendimento 10 Estrelas, nossas lojas têm o objetivo de garantir a agilidade e a melhor experiência de compra para todos os nossos clientes.
Somos mais de 30 mil colaboradores e a nossa política de gestão de pessoas é reconhecida com diversos prêmios, estando há mais de 25 anos entre as melhores empresas para trabalhar nos rankings da revista Você S/A e do Instituto Great Place to Work. Conseguimos isso porque somos fiéis ao nosso propósito e aos nossos valores.
ACREDITAMOS QUE PARA TRABALHAR AQUI, VOCÊ PRECISA TER:
Gente que gosta de gente
Trabalhamos de forma colaborativa, com transparência, humildade e respeito. Temos energia positiva e comemoramos os resultados.
Atitude de dono
Fazemos mais com menos e pensamos na empresa como um todo.
Mão na massa
Fazemos acontecer e trabalhamos duro, sem medo de errar.
Simplicidade e inovação
Estamos em constante aprendizado, sempre exercendo autonomia com responsabilidade.
Cliente em 1º lugar
Colocamos o cliente no centro das decisões e temos paixão por servir.