Uma conversa agradável é só parte da avaliação. O Harnz permite examinar a experiência, investigar o caminho da resposta e testar o comportamento contra as regras do negócio.
EVALLAB / EXPLORE UMA AVALIAÇÃODEMONSTRAÇÃO INTERATIVA
● ● ●Harnz / EvalLabDados fictícios
Campanha preparada para demonstração. Casos, respostas, notas, custos e resultados são fictícios; não representam ensaio executado nem garantia de qualidade em produção.
A regra crítica precisa aparecer no resultado.
EvalLab é o laboratório de avaliação do Harnz. Ele organiza campanhas com objetivos, cenários, critérios e limites de gasto. No exemplo, a resposta é clara e cordial, mas oferece um desconto proibido. A violação muda o veredito.
Integridade da avaliação
Indica se a avaliação tem condições de ser interpretada. Uma avaliação íntegra pode revelar uma resposta inadequada.
Nota e critérios
Mostram dimensões como clareza e aderência. Uma média alta não apaga uma violação crítica.
Objetivo e evidência
Relacionam o resultado à pergunta que motivou o teste. No exemplo, conceder 30% viola o limite de 10%, mesmo com uma boa redação.
EXPERIÊNCIA. INVESTIGAÇÃO. CRITÉRIO.
Três perspectivas sobre a mesma IA.
01Cliente
A experiência faz sentido?
Uma pessoa conversa com a IA, comenta o atendimento e avalia como ela conduz a situação. Esse olhar revela dúvidas, atritos e expectativas que a equipe precisa conhecer.
A resposta resolveu minha dúvida ou me fez repetir a mesma informação?
02Equipe
Como a resposta aconteceu?
A Central de Testes reúne sessões e logs, registros da execução. A equipe pode investigar contexto, agente, ferramentas e etapas para entender a origem de um comportamento.
A agenda foi consultada antes de oferecer um horário?
03EvalLab
O objetivo foi cumprido?
Campanhas organizam cenários para avaliar critérios, examinar violações e comparar resultados. O reteste ajuda a verificar se uma correção tratou o problema observado.
A IA respeitou o limite de desconto mesmo quando foi pressionada?
A conversa na frente. A execução ao lado.
Troque o cenário na Central de Testes para acompanhar como mudam a resposta, a ação e a regra em revisão. A demonstração mantém a investigação próxima do atendimento.
● ● ●Harnz / Central de TestesSem ações externas
Central de Testes demonstrativa, sem envio e sem acesso a sistemas reais. Logs, custos e respostas são fictícios. Ações de escrita estão simuladas nestes exemplos.
Estas cenas são inteiramente simuladas. Na plataforma, consultas podem usar sistemas reais, e algumas modalidades permitem ações reais quando habilitadas. O ambiente e as permissões precisam ser conferidos antes de testar.
Uma trilha para encontrar a causa.
O pipeline, sequência de processamento da mensagem, organiza as etapas entre entrada e resposta. O trace, registro de uma execução, ajuda a identificar onde entrou uma regra, uma ferramenta ou uma fonte de conhecimento.
Recriação demonstrativa inspirada no Mapa Visual do Harnz. Regras, nomes, conexões e registros fictícios; detalhes internos de implementação foram omitidos.
Mapa ilustrativo, com agentes, regras e dados fictícios. Não expõe configurações de clientes.
Encontrar. Entender. Ajustar. Conferir de novo.
Uma falha útil deixa evidência para a próxima decisão. A equipe revisa a configuração, verifica como aplicar a mudança e retesta os cenários pertinentes, mantendo o acompanhamento após o ajuste.
01Definir o objetivo
02Preparar os cenários
03Examinar as evidências
04Revisar a configuração
05Retestar e acompanhar
O teste informa a decisão. A responsabilidade continua humana.
Aprovar um cenário não garante todas as conversas futuras. A qualidade depende dos critérios, da cobertura dos testes e do acompanhamento em produção. Versões ajudam a comparar configurações; o efeito de salvar e as opções de recuperação variam por recurso.
EXPLORE O HARNZ
Há mais por trás de cada resposta.
Conheça as conexões, os testes, as escolhas de modelos e os caminhos de continuidade da operação.