About this role
O que buscamos
Buscamos um(a) profissional sênior de Qualidade de Software (QA) com experiência em testes de aplicações tradicionais e soluções de Inteligência Artificial Generativa. O perfil atuará na definição de estratégias de testes, automação, validação de modelos baseados em LLMs, pipelines RAG e plataformas financeiras, garantindo qualidade, confiabilidade, segurança e performance das soluções.
---
Responsabilidades
- Atuar com o planejamento e execução de estratégias de testes funcionais, integrados, regressivos e de performance;
- Projetar e executar testes de aplicações baseadas em Inteligência Artificial e modelos de linguagem (LLMs);
- Avaliar a qualidade de respostas geradas por IA considerando critérios de precisão, coerência, tom, segurança e viés;
- Desenvolver e manter frameworks e suítes de testes automatizados;
- Validar soluções integradas a pipelines RAG, bases de conhecimento e bancos vetoriais;
- Executar testes de APIs, serviços backend e integrações entre sistemas;
- Identificar riscos, falhas e cenários de borda relacionados ao comportamento dos modelos de IA;
- Atuar com validações de integridade, reconciliação e qualidade de dados;
- Coordenar testes de regressão relacionados a releases, correções e mudanças de infraestrutura;
- Colaborar com equipes de desenvolvimento, produto e análise de negócios para garantir a testabilidade das soluções;
- Conduzir análises e priorização de defeitos com base no impacto para o negócio;
- Monitorar indicadores de qualidade, cobertura de testes e automação;
- Elaborar relatórios executivos e recomendações de melhoria contínua;
- Apoiar investigações de incidentes em produção e análises de causa raiz;
- Mentorar profissionais da equipe e promover boas práticas de qualidade de software;
---
Requisitos e Qualificações
- Experiência sólida em Qualidade de Software (QA) ou Quality Engineering;
- Experiência em posições sêniores ou de liderança técnica em QA;
- Inglês avançado ou fluente para comunicação diária;
- Conhecimento de estratégias de testes funcionais, integração, regressão e performance;
- Experiência com automação de testes utilizando Selenium, Playwright, Robot Framework ou ferramentas similares;
- Conhecimento em desenvolvimento utilizando Java e Python;
- Experiência com automação e validação de APIs;
- Conhecimento em consultas a bancos de dados, validação e reconciliação de dados;
- Experiência com pipelines CI/CD e ferramentas como Jenkins, GitHub ou similares;
- Conhecimento da arquitetura e comportamento de Large Language Models (LLMs);
- Experiência com Prompt Engineering e avaliação de respostas geradas por IA;
- Conhecimento em LangChain e/ou LangGraph;
- Experiência com pipelines RAG (Retrieval-Augmented Generation);
- Conhecimento em bancos de dados vetoriais e buscas por similaridade;
- Conhecimento em protocolos de integração e testes de ferramentas conectadas via MCP;
- Conhecimento de metodologias de testes de segurança, viés e validação de sistemas de IA.
---
Diferenciais
- Experiência no segmento de securitização, mercado de capitais ou ativos financeiros;
- Vivência com testes em plataformas financeiras complexas;
- Conhecimento avançado em embeddings, tokenização, mecanismos de atenção e inferência de LLMs;
- Experiência com testes de soluções agentic (AI Agents);
- Conhecimento em monitoramento da qualidade de modelos de IA em escala;
- Vivência com liderança técnica e desenvolvimento de times de QA;
- Experiência com ferramentas de IA e Machine Learning aplicadas à automação de testes.