Data Engineer (Azure/ Databricks)

 Posted 3 months ago
  
 Brazil
  
2-5 years experience
Apply Now

Please mention DailyRemote when applying

AI Summary

The role involves developing, testing, deploying, monitoring, and maintaining data processes, creating end-to-end pipelines from ingestion to distribution ensuring efficiency and governance. Responsibilities also include participating in solution design for medium-impact projects and collaborating with digital product teams on architecture and integration strategies.

A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na empresa.

Sabemos que grandes resultados só são alcançados com uma grande equipe, por isso procuramos pessoas talentosas e apaixonadas, com desejo de crescer profissionalmente e criar uma trajetória de carreira conosco. 

Papéis e Responsabilidades:

•   Ser responsável por desenvolver, testar, implantar, monitorar e manter processos que forneçam dados para análises. A missão inclui criar pipelines ponta a ponta, desde a ingestão até a distribuição garantindo eficiência, governança, escalabilidade e aderência às demandas do negócio.

•     Participar da definição e desenho de soluções para projetos de médio impacto, alinhando necessidades dos stakeholders e colaborando com o time de produto digital.

•     Colaborar com times de produtos digitais, influenciando decisões de arquitetura e estratégias de integração de dados.

•     Implementar checks de qualidade, políticas de housekeeping e controles de acesso, seguindo as melhores práticas de engenharia de dados.

•     Desenvolver e realizar manutenção em fluxos de dados que combinem soluções já conhecidas e novos desafios, avaliando oportunidades de otimização.

•     Avaliar, definir e implementar modelos de dados que garantam armazenamento, acesso e manipulação eficientes.

•     Participar ativamente dos ritos estabelecidos pela liderança da squad, colaborando com a eficácia da atividade.

Qualificações Essenciais:


•     Experiência em Azure (Data Lake, Functions, Data Factory, Synapse ou serviços equivalentes).

•     Vivência com Databricks e desenvolvimento de pipelines distribuídos.

•     Sólidos conhecimentos em PySpark.

•     Experiência com Airflow e orquestração de pipelines.

•     Conhecimento em DevOps (CI/CD, versionamento, automação de deploy).

•     Construção e manutenção de jobs e processos de dados em produção.

•     Conhecimentos em modelagem de dados (dimensional, relacional, data vault etc


Qualificações Desejáveis:

•     Experiência com componentes reutilizáveis e bibliotecas internas.

•     Familiaridade com ambientes de MLOps.

•     Vivência com governança de dados (catalogação, lineage, políticas).


Nossa missão é Auxiliar as empresas a extrair todo o potencial de Dados e Digital objetivando aumentar seu desempenho, ajudando na transformação, gerando novas alavancas de crescimento e competitividade.

Vem fazer parte do Time Keyrus!

Se você quiser saber mais sobre nós, convidamos você a visitar nosso site: http://www.keyrus.com/br/


Desejamos boa sorte! 😊🚀

Similar Jobs

See all Remote Software Development jobs →

Personalize your Remote Job Search in 3 Easy Steps!

Discover remote opportunities in Data Engineer

Answer easy questions

Answer easy questions

200,000+ jobs across 15+ categories

Get your best job matches

Get your best job matches

Only hand-screened, legit jobs

Find a remote job faster

Find a remote job faster

No ads, scams, or junk

I was the first applicant for a remote marketing position that got listed on the company website the same day I applied. Had an interview within 48 hours!

Sarah J. — Sarah J. · Marketing Manager ★★★★★ Verified