HARNZ / MODELOS E CUSTOS

O mesmo desafio.
Escolhas demonstradas.

A escolha do modelo e o custo de uso precisam fazer sentido para cada tarefa. O Harnz reúne informações para investigar o consumo e orientar a evolução da operação.

Explore os detalhes

COMPARE RESPOSTAS, QUALIDADE, TEMPO E CUSTO

HARNZ CENTRAL DE MODELOS
Ensaio fictício
Troque a tarefa e compare os resultados
Resposta de agente · 60 casos por modelo

O mais barato respeitou a sua política comercial?

Um dos casos da amostraSe eu fechar as oito licenças hoje, consigo 25% de desconto?
COMPARAÇÃO SOB AS MESMAS CONDIÇÕES

Mesma mensagem e instruções

Mesma regra: até 10% de desconto

Exceção exige avaliação da equipe

Amostra, respostas e valores preparados.
A

Modelo A

Rápido, mas com falhas

57/60casos aprovados
8,9/10nota média

3 casos com violação crítica

Custo dos 60 casos
US$ 0,048
Tempo mediano
2,1 s
Tokens de entrada
54.000
Tokens de saída
6.000
RESPOSTA AO CLIENTE
Consigo os 25% para as oito licenças se você fechar hoje. Posso preparar o contrato?

Prometeu uma exceção que não podia aprovar.

B

Modelo B

Candidato para esta tarefa

60/60casos aprovados
9,2/10nota média

Nenhuma violação crítica nesta amostra

Custo dos 60 casos
US$ 0,096
Tempo mediano
3,4 s
Tokens de entrada
72.000
Tokens de saída
12.000
RESPOSTA AO CLIENTE
Para as oito licenças, consigo trabalhar com até 10% de desconto. Os 25% precisam de avaliação da equipe. Quer que eu encaminhe esse pedido?

Respeitou o limite e encaminhou a exceção.

C

Modelo C

Menor custo do ensaio

58/60casos aprovados
8,6/10nota média

2 casos com violação crítica

Custo dos 60 casos
US$ 0,024
Tempo mediano
1,6 s
Tokens de entrada
36.000
Tokens de saída
6.000
RESPOSTA AO CLIENTE
Para oito licenças, posso oferecer 15% e seguimos com a contratação. Funciona para você?

A proposta de 15% também ultrapassou a regra.

Neste ensaio, o B é o candidato para atendimento.

O C custou menos e o A foi mais rápido que o B. A decisão considera também as violações: só o B passou nos 60 casos preparados. Isso orienta a validação, sem garantir comportamento futuro.

Como ler a evidência
Classificação de intenção: escolha independenteAtendimento comercial: candidato BPróximo passo: validar e acompanhar o uso
Classificação de intenção · 60 casos por modelo

Para uma tarefa menor, a escolha pode mudar.

Um dos casos da amostraQuero entender os planos e conversar com o comercial sobre oito licenças.
COMPARAÇÃO SOB AS MESMAS CONDIÇÕES

Mesmas 60 mensagens por modelo

Mesmos rótulos de intenção

Sem ferramentas nesta tarefa

Amostra, respostas e valores preparados.
A

Modelo A

Aprovado no ensaio

60/60casos aprovados
9,0/10nota média

Nenhuma violação crítica nesta amostra

Custo dos 60 casos
US$ 0,018
Tempo mediano
0,9 s
Tokens de entrada
18.000
Tokens de saída
3.000
SAÍDA PARA ROTEAMENTO
Intenção: comercial. Encaminhamento: agente de vendas.

Identificou a intenção e usou o rótulo esperado.

B

Modelo B

Aprovado no ensaio

60/60casos aprovados
9,0/10nota média

Nenhuma violação crítica nesta amostra

Custo dos 60 casos
US$ 0,072
Tempo mediano
1,8 s
Tokens de entrada
36.000
Tokens de saída
6.000
SAÍDA PARA ROTEAMENTO
Intenção: comercial. Encaminhamento: agente de vendas.

Mesmo resultado, com maior consumo neste exemplo.

C

Modelo C

Candidato para esta tarefa

60/60casos aprovados
9,0/10nota média

Nenhuma violação crítica nesta amostra

Custo dos 60 casos
US$ 0,012
Tempo mediano
0,7 s
Tokens de entrada
12.000
Tokens de saída
3.000
SAÍDA PARA ROTEAMENTO
Intenção: comercial. Encaminhamento: agente de vendas.

Mesmo resultado, menor custo e menor tempo no ensaio.

Para classificar a intenção, o candidato passa a ser o C.

Os três passaram nos mesmos 60 casos de classificação. Aqui, custo e tempo favorecem o C. O bom resultado nesta função não substitui a avaliação dele no atendimento comercial.

Como ler a evidência
Classificação de intenção: candidato CAtendimento comercial: escolha independenteComparar sempre dentro da mesma função
Ensaio ilustrativo preparado: modelos A, B e C, respostas, métricas e preços são fictícios. Não é um benchmark executado nem uma comparação entre fornecedores reais. As telas sintetizam capacidades de comparação e avaliação do Harnz.

Escolha de modelo tem mais de uma fonte de evidência.

A demonstração acima usa resultados preparados. Na operação, análise de modelos, laboratório e uso real são leituras distintas. Dados ausentes, inclusive preço, devem aparecer como indisponíveis.

Análise de capacidade

Especificações e análise do Copilot ajudam a verificar ferramentas, modalidades e adequação à tarefa.

Benchmarks externos

Avaliações de terceiros ficam ao lado da análise. Uma nota geral não substitui o teste do seu cenário.

Avaliação no seu cenário

Testes e EvalLab examinam respostas, critérios e violações. A amostra e o objetivo precisam estar claros.

Telemetria de produção

Registros de uso mostram chamadas, custo e tempo por função. Volume de uso informa confiança, sem virar nota de qualidade.

O número ganha valor quando você entende sua origem.

Se o custo aumentou, foi o volume de atendimentos, o tamanho do contexto ou uma rodada de testes? A leitura por agente, modelo, período e tipo de atividade ajuda a encontrar uma explicação.

HARNZ / CONSUMO DE IAMesmo mês · dados fictícios
Escolha uma atividade para examinar o consumo
Atendimento aos clientes
US$42,80

Consumo dos agentes e da identificação de intenção na operação.

Tokens de entrada8,2 mi
Tokens de saída1,4 mi
Limite de produçãoUS$ 80,00
53,5% utilizado · alerta configurado em 80%
CONSUMO POR AGENTE
QualificaçãoUS$ 18,40
AgendamentoUS$ 14,80
Pós-atendimentoUS$ 9,60
Por modelo
Modelo AUS$ 26,40
Modelo BUS$ 16,40
✓

Detalhamento reconciliado com o total de US$ 42,80.

Validação pela equipe
US$7,20

Sessões de teste acompanhadas separadamente do atendimento em produção.

Tokens de entrada1,3 mi
Tokens de saída0,2 mi
Recorte independente

Este consumo não é somado ao limite de produção da demonstração.

CONSUMO POR ATIVIDADE
Política comercialUS$ 3,60
AgendamentoUS$ 2,40
Passagem para equipeUS$ 1,20
Por modelo
Modelo AUS$ 4,80
Modelo BUS$ 2,40
✓

Detalhamento reconciliado com o total de US$ 7,20.

Campanhas de avaliação
US$5,40

Consumo do laboratório em seu próprio recorte. Não compõe o limite de produção deste exemplo.

Tokens de entrada0,9 mi
Tokens de saída0,2 mi
Recorte independente

Este consumo não é somado ao limite de produção da demonstração.

CONSUMO POR ATIVIDADE
Campanha de políticaUS$ 2,70
ComparaçãoUS$ 1,80
RetesteUS$ 0,90
Por modelo
Modelo AUS$ 3,60
Modelo BUS$ 1,80
✓

Detalhamento reconciliado com o total de US$ 5,40.

Valores fictícios em dólares, relativos ao mesmo mês. Representam consumo de IA, não a fatura completa do projeto. Modelo A e Modelo B são identificadores ilustrativos.
01Produção

Produção

Consumo das respostas dos agentes e da classificação de intenção, dentro do recorte operacional utilizado pelo Harnz.

O atendimento de um cliente no WhatsApp.
02Testes

Testes

Execuções de validação que precisam ser examinadas separadamente do atendimento em produção.

A equipe verifica a regra de agendamento.
03EvalLab e uso interno

EvalLab e uso interno

Campanhas de laboratório, copiloto e outras atividades têm seus próprios registros. Não devem ser confundidos com o consumo de produção.

Uma campanha compara respostas a pedidos de desconto.

Diferentes tarefas pedem escolhas diferentes.

O Harnz permite selecionar modelos de diferentes provedores, inclusive via OpenRouter, serviço que reúne acesso a múltiplos modelos. A escolha considera capacidade, qualidade e custo, além da compatibilidade com a operação.

Classificar uma intenção

Identificar um pedido de agendamento.

Clareza da classificação + tempo de resposta

Conduzir o atendimento

Consultar uma ferramenta e responder com contexto.

Qualidade + ferramentas + contexto

Acionar uma ferramenta

Consultar disponibilidade antes de confirmar um horário.

Suporte a ferramentas + retorno correto

Nem todo modelo aceita as mesmas ferramentas, imagens ou extensões de contexto. Trocar um modelo exige verificar essas capacidades e avaliar o comportamento no cenário desejado.

Tokens ajudam a explicar o trabalho feito pela IA.

Tokens são unidades em que o modelo divide o conteúdo que processa. Uma chamada recebe tokens de entrada, como instruções e histórico, e produz tokens de saída, como a resposta ao cliente.

TOKENS DE ENTRADA

Instruções + mensagem + histórico + resultados de ferramentas

TOKENS DE SAÍDA

Resposta gerada

Uma resposta curta pode ter usado um contexto extenso. Por isso, olhar apenas o tamanho da mensagem enviada ao cliente não explica o consumo.

Preços variam por modelo, provedor e modalidade de processamento. Cache, reaproveitamento de contexto, pode alterar a cobrança quando suportado. Contagens de tokens não são uma tabela universal de preços.

Limites para orientar a operação.

Tetos e alertas por organização ajudam a acompanhar o gasto. Quando um limite se aproxima, a equipe pode investigar a origem do consumo e revisar o uso, conforme os controles configurados.

  1. 01Selecionar o período
  2. 02Identificar agente e modelo
  3. 03Comparar o volume e o contexto
  4. 04Avaliar um ajuste com testes

E quando um modelo fica indisponível?

Um fallback, modelo alternativo para falhas, pode ser configurado quando compatível com a operação. Essa alternativa também precisa respeitar as ferramentas, os limites e os critérios de qualidade do atendimento. Se não houver uma alternativa adequada, a contingência deve encaminhar a situação para a equipe.

Consumo de IA e custo total do projeto são leituras diferentes.

O monitor não representa a fatura completa de implantação, sustentação, CRM ou outros serviços. Os exemplos desta página usam valores fictícios em dólares, no mesmo período, apenas para demonstrar a leitura do consumo.

TECNOLOGIA PRÓPRIA DA BYTEBIO

Escolher bem é medir, testar e acompanhar.

A Bytebio avalia os modelos e o consumo dentro do contexto da aplicação, com critérios de qualidade e acompanhamento definidos para a operação.

Converse com a Bytebio← Voltar à visão geral do Harnz
Falar no WhatsApp