Tester/QA e Curadoria de IA Senior

This is a fully remote position, open to applicants in Brazil.

📋 Description

• Assegurar que as soluções de Inteligência Artificial Generativa sejam confiáveis, seguras e precisas;

• Analisar as respostas dos modelos e detectar alucinações;

• Monitorar comportamentos em ambiente de produção e gerenciar bases de conhecimento;

• Estabelecer e implementar frameworks para avaliação de modelos generativos;

• Criar e manter suítes de testes para a validação das respostas;

• Conduzir avaliações comparativas (A/B testing) entre diferentes versões de prompts;

• Registrar padrões de falhas e respostas inadequadas;

⛳️ Requirements

• Experiência em testes, avaliação ou garantia de qualidade de sistemas de software ou dados;

• Conhecimento sobre conceitos de IA Generativa, LLMs e RAG;

• Habilidade analítica para interpretar logs, métricas e padrões de comportamento de sistemas de IA;

• Conhecimento em Python para automação de avaliações e análise de dados de qualidade;

• Capacidade de comunicação clara para relatar problemas e sugerir melhorias a públicos técnicos e não-técnicos;

• Organização e disciplina para documentar processos, incidentes e decisões de maneira consistente;

• Compreensão dos princípios de IA Responsável, ética em IA e LGPD/GDPR.

🏝️ Benefits

• Plano de saúde e odontológico;

• Vale alimentação e refeição;

• Auxílio-creche;

• Licença parental estendida;

• Parceria com academias e profissionais de saúde e bem-estar via Wellhub (Gympass) TotalPass;

• Participação nos Lucros e Resultados (PLR);

• Seguro de Vida;

• Plataforma de aprendizagem contínua (CI&T University);

• Clube de descontos;

• Plataforma online gratuita dedicada à promoção da saúde física, mental e bem-estar;

• Curso gestante e parentalidade responsável;

• Parceria com plataformas de cursos online;

• Plataforma para aprendizagem de idiomas;

• E muitos outros.