Please mention DailyRemote when applying
Match your resume skills with our AI powered skill match!
The Senior Data Engineer is responsible for building and evolving data pipelines, integrations, and processing rules to support analytical products and monetization MVPs. They will also implement data quality controls, monitoring mechanisms, and support feature engineering for AI/ML initiatives.
Objetivo do cargo:
Responsável pela construção e evolução das integrações, pipelines e regras de processamento de dados que suportarão o MAPR, os produtos analíticos e os MVPs de Monetização de Dados da EloPar.
Principais responsabilidades:
Desenvolver pipelines de ingestão, transformação e disponibilização de dados.
Implementar integrações utilizando Informatica IICS e componentes Azure.
Implementar regras de negócio associadas aos Drivers/Motores do MAPR.
Desenvolver componentes reutilizáveis para processamento das diferentes unidades de negócio.
Construir mecanismos de reconciliação e validação antes e depois do processamento.
Implementar tratamentos de erro, reprocessamento e controles de histórico.
Desenvolver mecanismos de logging, monitoramento e rastreabilidade.
Implementar GuardRails e controles automáticos de qualidade dos dados.
Desenvolver rotinas utilizando Python e SQL.
Apoiar estruturação de datasets analíticos e feature engineering para iniciativas de IA/ML.
Implementar testes unitários e integrados das soluções desenvolvidas.
Participar de code reviews e definição de padrões técnicos.
Documentar pipelines, transformações, dependências e regras implementadas.
Apoiar homologação e resolução de incidentes durante Go Live e estabilização.
Requisitos obrigatórios
Experiência sólida em Engenharia de Dados.
Python avançado.
SQL avançado.
Experiência com pipelines ETL/ELT.
Experiência com serviços de dados Microsoft Azure.
Conhecimento de ADLS Gen2 e bancos relacionais.
Experiência ou conhecimento relevante em Informatica IICS / Informatica Cloud.
Versionamento de código com Git.
Conhecimento de CI/CD.
Experiência com qualidade de dados, tratamento de erros e monitoramento.
Conhecimento de modelagem de dados.
100% remoto
Stop the endless job search. Our AI finds and applies to the best jobs for you.
Discover remote opportunities in Others
Answer easy questions
200,000+ jobs across 15+ categories
Get your best job matches
Only hand-screened, legit jobs
Find a remote job faster
No ads, scams, or junk
“I was the first applicant for a remote marketing position that got listed on the company website the same day I applied. Had an interview within 48 hours!”