Modelos de Linguagem
Quem disse o quê: como avaliar atribuição de falas em resumos de IA
Confira quem disse o quê em resumos de IA com gabarito de participantes, evidências por turno, medidas de…
Modelos de Linguagem
138 matérias publicadas
Modelos de Linguagem
Como medir sensibilidade de modelos de IA a erros de digitação
Aprenda a avaliar a sensibilidade da IA a erros de digitação com pares de teste, métricas claras e…
Modelos de Linguagem
Intervalos em respostas de IA: testar limites inclusivos e exclusivos
Aprenda a testar limites inclusivos e exclusivos em respostas de IA, com casos de borda, gabarito determinístico e…
Modelos de Linguagem
Classes desbalanceadas em classificadores de IA: avaliar sem engano
Avalie classificadores de IA com classes desbalanceadas usando precisão, revocação, matriz de confusão e limiares alinhados à capacidade…
Modelos de Linguagem
Testes metamórficos de IA: avaliar respostas sem gabarito único
Aprenda a criar testes metamórficos para avaliar respostas de IA, validar transformações e detectar inconsistências sem exigir um…
Modelos de Linguagem
Benchmarks de tempo até o primeiro token (TTFT) entre vLLM, TGI e SGLang em produção
Aprenda a comparar TTFT em vLLM, TGI e SGLang com carga controlada, percentis, cache e erros registrados, sem…
Modelos de Linguagem
ChatGPT, Gemini ou Claude pagos: como escolher o plano certo
Compare ChatGPT, Gemini e Claude pagos por tarefas, limites, integração e custo total. Veja como testar opções antes…
Modelos de Linguagem
GPT-6: o que muda no ChatGPT e na API da OpenAI
Entenda o GPT-6 no ChatGPT e na API: modelos Astra, Sol e Luna, preços, diferenças entre planos e…
Modelos de Linguagem
Testes de IA: registrar seed e temperatura para comparar versões
Saiba registrar seed, temperatura, modelo, prompts e ambiente nos testes de IA para comparar versões, investigar diferenças e…
Modelos de Linguagem
Unidades de medida em respostas de IA: avaliar conversões e ambiguidades
Aprenda a avaliar conversões de unidades em respostas de IA, identificar ambiguidades e validar cálculos com testes, referências…