AWS Data Engineer | Senior (Remote)
Descrição da vaga
.
Responsabilidades e atribuições
- Construir e otimizar pipelines de dados para suportar arquiteturas de IA generativa;
- Realizar ingestão, limpeza, transformação e organização de grandes volumes de dados técnicos;
- Estruturar e preparar documentos complexos (normas, requisitos, templates), incluindo técnicas de chunking para uso em modelos de linguagem;
- Implementar e gerenciar bases de conhecimento com busca vetorial (RAG);
- Desenvolver e manter pipelines automatizados de dados com foco em performance e escalabilidade;
- Estruturar datasets para treinamento de modelos (Supervised Fine-Tuning e Reinforcement Fine-Tuning);
- Definir e organizar inputs, outputs esperados e critérios de avaliação dos modelos;
- Garantir governança, qualidade, segurança e rastreabilidade dos dados;
- Atuar na otimização do consumo de tokens e eficiência dos modelos;
- Suportar análises comparativas de performance entre diferentes abordagens de IA;
- Trabalhar em conjunto com times de IA, engenharia e negócio, garantindo alinhamento técnico e funcional.
Requisitos e qualificações
- Forte domínio na construção de pipelines de dados (ETL/ELT);
- Experiência com processamento e preparação de dados para IA/ML;
- Conhecimento prático em arquiteturas de IA generativa (RAG, Fine-Tuning, embeddings);
- Experiência com manipulação e estruturação de dados não estruturados (documentos técnicos);
- Vivência com serviços de cloud computing, especialmente AWS;
- Experiência com serviços como Amazon Bedrock;
- Conhecimento em bancos de dados vetoriais e técnicas de busca semântica;
- Domínio em Python e SQL;
- Experiência com práticas de governança e segurança de dados;
- Vivência com automação e versionamento de pipelines.
Etapas do processo
- Etapa 1: Cadastro
- Etapa 2: Mapemaneto de Stack
- Etapa 3: Fit Cultural
- Etapa 4: Entrevista Líder
- Etapa 5: Oferta e Negociação
- Etapa 6: Contratação
Become a Compasser, be part of AI/R.
Compass UOL is a global firm and part of the AI Revolution Company, together transforming organizations using Artificial Intelligence, Generative AI, and other of today’s most advanced technologies.
We equip our team with proprietary and external AI-driven tools to design and build digital-native platforms, integrating cutting-edge technologies and enabling companies to innovate, transform their businesses, and drive success in their markets.
To achieve this, we attract and develop the best talent, creating opportunities that enhance people’s lives and highlight the positive impact of disruptive technologies.
We empower borderless talent and promote knowledge and opportunities in the latest market trends, driving significant personal and professional growth.
Join us and be part of the AI-driven revolution.