Engenheiro de Dados Databricks (Home Office/Brasil)
Programmers - AI, Data & Software
Descrição da vaga
NOSSO NEGÓ
CIO
Aqui na Programmers, aceleramos grandes ideias com inovaç
ã
o e tecnologia. Com uma trajetó
ria de mais de 30 anos, o que nos move sã
o os desafios em construir ideias em soluç
õ
es reais, para que nossos clientes sejam referê
ncias no segmento que atuam.
Especialistas em desenvolvimento de software e inteligê
ncia de dados, temos uma relaç
ã
o de transparê
ncia, confianç
a, credibilidade e reconhecimento neste mercado.
Nosso maior sonho? Impactar empresas e pessoas.
O QUE ESPERAMOS DE VOCÊ
?
Buscamos um Engenheiro de Dados com experiê
ncia em Databricks , que tenha domí
nio em processos de ingestã
o, transformaç
ã
o, processamento e estruturaç
ã
o de dados, garantindo que as informaç
õ
es estejam organizadas, confiáveis e prontas para atender à
s necessidades do negó
cio.
É
importante ter um perfil dinâ
mico, proativo e adaptável , com autonomia para atuar em times enxutos , lidar com diferentes desafios e entregar soluç
õ
es de forma ágil, nos quais a qualidade e a organizaç
ã
o dos dados sã
o fundamentais para viabilizar o desenvolvimento de agentes e outras aplicaç
õ
es inteligentes.
RESPONSABILIDADES:
Projetar, desenvolver e implantar pipelines de dados ETL/ELT escaláveis no Databricks usando PySpark, SQL e Delta Lake.
Otimizar o desempenho dos pipelines de dados e gerenciar fluxos de trabalho utilizando Jobs, Workflows e notebooks do Databricks.
Ingerir, limpar, transformar e processar dados estruturados e nã
o estruturados provenientes de diversas fontes.
Colaborar com arquitetos de dados, analistas e usuários de negó
cios para traduzir requisitos em modelos.
Gerenciar e monitorar a execuç
ã
o dos pipelines com ferramentas como Airflow.
PARA ESSA OPORTUNIDADE VOCÊ
PRECISA TER:
Experiê
ncia prática em engenharia de dados, trabalhando com Databricks.
Proficiê
ncia em PySpark, SQL e processamento distribuí
do de dados.
Compreensã
o só
lida do Delta Lake, arquitetura Lakehouse e princí
pios de modelagem de dados.
Experiê
ncia com plataformas em nuvem como AWS (Databricks em qualquer nuvem é
aceitável).
Familiaridade com pipelines CI/CD e controle de versã
o (ex.: Git, GitHub, Azure DevOps).
Familiaridade com uso de IA no dia a dia.
Experiê
ncia com ferramentas de orquestraç
ã
o (ex.: Airflow, Workflows do Databricks).
Habilidades avanç
adas para resoluç
ã
o de problemas e depuraç
ã
o em ambientes distribuí
dos.
SERIAM PONTOS DE DESTAQUE SE VOCÊ
TIVER:
Certificaç
ã
o Databricks (ex.: Databricks Certified Data Engineer Associate/Professional) é
altamente desejável
PARA UMA VIDA MAIS SAUDáVEL, TE PROPORCIONAMOS:
Polí
tica de Home Office
Plano de saú
de, com cobertura nacional
Plano odontoló
gico
Convê
nio com Sesc
Wellhub
TE APOIAMOS COM:
Vale refeiç
ã
o ou alimentaç
ã
o
Auxí
lio creche
Participaç
ã
o nos resultados
Licenç
a parental estendida
Plano de desenvolvimento individual/anual com subsí
dio para capacitaç
ã
o
Treinamento do idioma inglê
s
Nossas vagas sã
o para todos!
Valorizamos a diversidade, pois ela impulsiona a inovaç
ã
o, fortalece nossas soluç
õ
es e torna nosso ambiente mais inclusivo. Cada diferenç
a é
uma oportunidade de aprendizado, tornando nosso dia a dia mais inspirador e nossas entregas ainda melhores.
Sobre a empresa
:
Especialistas em desenvolvimento de software e inteligência de dados, temos uma relação de transparência, confiança, credibilidade e reconhecimento neste mercado. Aceleramos inovações digitais com agilidade e tecnologia.
Prezamos pelo nosso diferencial que são as pessoas que compõem nossos times multidisciplinares. É através de cada colaborador que formamos nossa expertise. Incentivamos programas internos de estágio, formação, capacitação e aprimoramento. Preparamos um ambiente de respeito, que estimule a criatividade e valorize a autenticidade de cada um.
Nosso maior sonho? Impactar empresas e pessoas .
Faça parte do nosso time, #vemserprogrammers