🏢 Sobre a empresa:

A contratante é uma empresa norte-americana de médio porte que desenvolve softwares voltados para produtividade.

📋 Descrição e Requisitos:

🚀 Responsabilidade total pela qualidade do sistema de avaliação de LLM e RAG (Retrieval-Augmented Generation).

🔍 Execução de avaliações estruturadas e análise de causa raiz para identificar falhas em modelos, prompts e citações.

📊 Manutenção de datasets de avaliação, incluindo controle de versão, cobertura e novos casos de produção.

🐍 Proficiência avançada em Python e SQL para automação de análises e fluxos de trabalho.

💡 Experiência mínima de 4 anos em pesquisa de dados, analytics aplicado ou programas de avaliação.

🗣️ Comunicação fluente em inglês (escrita e falada) para interação com times globais e lideranças.

🧪 Design de experimentos controlados com definições claras de métricas e critérios de sucesso.

✨ Conhecimentos em LangSmith, Ragas ou DeepEval são considerados diferenciais importantes.

#InteligenciaArtificial #DataScience #RemoteWork #LLM #Python