Pular para o conteúdo principal

AWS Data Engineer | Senior (Remote)

Ir para candidatura

Descrição da vaga

.

Responsabilidades e atribuições

  • Atuar no desenvolvimento e evolução de uma plataforma Data Mesh self-service para compartilhamento governado de dados em ambiente AWS;
  • Projetar integrações com engines de consumo de dados, principalmente Databricks, além de Glue ETL, Athena/Presto/Trino e Spark;
  • Desenvolver e manter APIs REST e serviços backend, garantindo segurança, versionamento, testes e qualidade em produção;
  • Evoluir mecanismos de virtualização, contratos de dados e compartilhamento entre produtores e consumidores;
  • Implementar automações e integrações utilizando Python, Java, AWS Lambda e arquiteturas orientadas a eventos com SNS/SQS;
  • Administrar e integrar componentes AWS como S3, Glue Catalog, Lake Formation e IAM em ambientes multi-account;
  • Automatizar provisionamento de recursos, permissões e fluxos de governança de dados;
  • Apoiar decisões de arquitetura, documentação técnica, observabilidade da plataforma e evolução contínua do produto.

Requisitos e qualificações

  • Experiência sólida como Engenheiro(a) de Dados Sênior em ambientes AWS e plataformas de dados distribuídas;
  • Domínio de AWS: S3 (Access Points e políticas), Glue Catalog/ETL, Lake Formation (grants, LF-Tags, cross-account) e IAM (roles e políticas);
  • Experiência com Databricks, Unity Catalog, integração com S3 e, idealmente, Glue Catalog/Lake Formation;
  • Conhecimento avançado em Python para APIs, automações e engenharia de dados;
  • Sólida experiência com Java para manutenção de serviços backend;
  • Experiência com desenvolvimento e sustentação de APIs REST em produção;
  • Conhecimento avançado em SQL e engines distribuídas como Spark, Athena, Presto ou Trino;
  • Experiência com arquiteturas orientadas a eventos utilizando SNS, SQS e Lambda;
  • Conhecimento de conceitos Data Mesh, governança de dados e contratos de dados;
  • Desejável experiência com PostgreSQL, Terraform/CloudFormation/CDK, EMR, Spark, AWS Bedrock e ambientes AWS multi-account.

Etapas do processo

  1. Etapa 1: Cadastro
  2. Etapa 2: Mapeamento de Stack
  3. Etapa 3: Fit Cultural
  4. Etapa 4: Entrevista Líder
  5. Etapa 5: Cadastro de Qualificação
  6. Etapa 6: Oferta e Negociação
  7. Etapa 7: Contratação

Become a Compasser, be part of AI/R.

Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today’s most advanced technologies.


We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.

To achieve this, we attract and develop the best talent, creating opportunities that enhance people’s lives and highlight the positive impact of disruptive technologies.

We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.

Join us and be part of the AI-driven revolution.

Candidatar-se
Candidatar-se