Pular para o conteúdo principal

Data Engineer | SR

Ir para candidatura

Descrição da vaga

.

Responsabilidades e atribuições

  • Atender alta complexidade nos fluxos de Data Processing;
  • Otimizar processamentos em batch, que ocorrem a cada 4 horas;
  • Analisar e reduzir custos da plataforma em cloud;
  • Realizar evolução das práticas de observabilidade, monitoramento e qualidade dos dados;
  • Responsável pela estruturação de Data Profiling, Data Quality e Governança de Dados.

Requisitos e qualificações


  • Fonte de dados principal: ERP TOTVS com base de dados Progress;
  • Formato dos dados: JSON;
  • Ingestão: Mecanismo de CDC (Change Data Capture) implementado em Progress/4GL;
  • Processamento: Realizado em batch (~4h/4h) com necessidade de otimização;
  • Ambiente Cloud: Amazon Web Services (AWS);
  • Experiência em engenharia de dados, com forte conhecimento em arquitetura de Data Lake / Lakehouse;
  • Sólido domínio de pipelines de dados em AWS e boas práticas de performance;
  • Conhecimento em ingestão via CDC, especialmente com fontes Progress/4GL ou similares;
  • Experiência com Data Quality, Data Observability, Governança de Dados e Data Profiling;
  • Proatividade para identificar gargalos técnicos e sugerir melhorias com foco em performance e custo-benefício;
  • Capacidade de atuar em equipe multidisciplinar, com bom relacionamento e comunicação.



Não possui todos os requisitos para a vaga?


Está tudo bem! Na Compass UOL, estimulamos o desenvolvimento contínuo de novos talentos e transformamos desafios em oportunidades.

Informações adicionais


#remote

"remote"

Etapas do processo

  1. Etapa 1: Cadastro
  2. Etapa 2: LLIA - Mapeamento de Stack
  3. Etapa 3: LLIA - Mapeamento Comportamental
  4. Etapa 4: Entrevista Fit Cultural
  5. Etapa 5: Entrevista com a Liderança/Cliente
  6. Etapa 6: Carta Oferta
  7. Etapa 7: Contratação

DREAM BIG WHEN IT COMES TO TECHNOLOGY. BE A COMPASSER! 🚀

Compass UOL is a global company that is part of AI/R, which drives the transformation of organizations through Artificial Intelligence, Generative AI, and Digital Technologies.


We design and build digitally native platforms using cutting-edge technologies to help companies innovate, transform businesses, and drive success in their markets. With a focus on attracting and developing the best talent, we create opportunities that improve lives and highlight the positive impact of disruptive technologies on society.


That's why our selection process goes beyond technical skills. Our goal is to find unique individuals with the potential to make an extraordinary impact on our clients.


We empower talent without borders and promote knowledge and opportunities in the latest market trends, driving significant results.


Join us and be part of the AI-driven digital revolution in the technology universe.



HOW OUR SELECTION PROCESS WORKS


1. ONLINE APPLICATION

Choose the opportunity that best fits your goals. Remember: having a well-detailed profile with your experiences and knowledge can make all the difference!

2. INTERVIEWS

Learn about our culture and company! During interviews, be present and do your best to share your expertise in a chronological and structured way.

3. EVALUATION

Our tests and assessments focus on finding talent with the cultural and technical fit for the position applied for.

4. FEEDBACK

Wait for our response regardless of the result! We have Gupy platform feedback certification.

Candidatar-se
Candidatar-se