analytics-que-importam
Todo dashboard de plataforma de IA é um carnaval: 30 gráficos, 12 cores, um punhado de "insights" gerados por alguma IA que tenta parecer útil. O problema é que 80% desses números não mudam decisão nenhuma.
Depois de olhar dados de centenas de hubs no Member AI, a gente consegue dizer com confiança: são quatro métricas que importam pra um creator de agente. O resto é ruído. Se ainda não montou seu primeiro agente, comece com este tutorial de 15 minutos.
Por que quase toda métrica é ruído
Uma métrica só importa se responde "sim" a duas perguntas:
- Se ela piorar ou melhorar, você vai fazer algo diferente amanhã?
- Ela se correlaciona com receita, retenção, ou experiência do member?
"Total de mensagens enviadas", por exemplo, falha nos dois. 10 mil mensagens podem ser 300 conversas produtivas ou 5 conversas rodando em loop. Não muda decisão.
Agora, taxa de resolução na conversa — esta muda decisão. Se cair de 72% pra 58%, você sabe que tem algo quebrado no agente e precisa agir hoje.
1. Taxa de resolução na conversa
Percentual de conversas que o member encerra com o problema/pedido resolvido, sem escalação pra humano nem abandono no meio.
Como o Member AI mede: o agente marca a conversa como "resolvida" quando (a) o member sinaliza positivamente no fim, (b) a ação foi concluída (pagamento, agendamento, entrega de conteúdo), ou (c) a última mensagem foi do agente e passaram 48h sem retorno sem nenhum indicador negativo.
60-75%
tem o que melhorar
Se cair muito: primeira coisa a fazer é abrir as 20 conversas mais recentes marcadas como "não resolvidas" e ler. Em 80% dos casos o problema é conteúdo faltando na base, não o agente sendo burro.
2. Custo por conversa resolvida
Tokens gastos no modelo + taxa Stripe (quando houve pagamento) dividido por número de conversas resolvidas.
Essa é a métrica mais importante pra quem quer entender economia unitária de verdade. Uma conversa que custa R$ 0,18 e fecha uma venda de R$ 497 tem economia diferente de uma que custa R$ 0,90 e fecha um agendamento gratuito. (Custo de token cai direto na sua conta com BYOK — entenda em por que BYOK importa.)
Referências do que a gente vê:
- Hub educacional com conteúdo simples: R$ 0,08 a R$ 0,25 por conversa resolvida;
- Hub de mentoria/consultoria (conversas mais longas): R$ 0,30 a R$ 0,90;
- Hub B2B com raciocínio complexo: R$ 1,20 a R$ 3,00.
Se seu custo tá muito acima disso, quase sempre o culpado é: prompt de sistema gigante (reduza), modelo overkill (troca 4o por 4o-mini), ou memória mal configurada (tá reinjetando contexto antigo em cada turno).
3. Conversão em ação de receita
Percentual de conversas que terminam em ação monetizável: pagamento, agendamento de call comercial, cadastro em lista paga, upgrade de plano.
Essa é a métrica mais "de negócio" do quarteto. Ela não diz se o agente tá gostoso de conversar — diz se ele tá gerando receita.
Benchmarks:
- Agente de conteúdo/educação: 3% a 8% de conversão em ação de receita;
- Agente comercial/SDR: 12% a 25%;
- Agente de suporte a cliente existente (upsell): 6% a 15%.
Se sua conversão tá baixa, raramente é o agente — é a oferta. Produto sem gatilho contextual claro, preço desalinhado com a promessa da conversa, ou CTA fraco no momento do sim.
4. Retenção de member (D30)
De 100 novos members que chegaram no agente em um determinado dia, quantos voltam e conversam de novo em 30 dias?
Essa é a métrica que separa agente que funciona de agente que vicia. Member que volta é member que percebeu valor. Member que não volta, nunca ia virar caso de sucesso.
< 25%
repensar posicionamento
O que ignorar
Métricas que aparecem em todo dashboard e não vão te dizer nada que você precise saber:
- Total de mensagens enviadas. Alto não é bom, baixo não é ruim.
- Tempo médio de resposta do agente. Sempre < 3s num LLM decente. Olhar isso é perda de tempo.
- Sentimento médio da conversa. Proxy fraquíssimo, fácil de enviesar.
- "Assertividade" ou "confiança" do modelo. Número inventado que nenhum provedor de IA garante.
- Tokens por conversa (isolado). Só importa dentro da métrica #2.
Como virar isso em decisão
O ritual que a gente recomenda pros hubs:
- Semanal: olha taxa de resolução. Caiu? Abre 20 conversas não resolvidas e lê.
- Quinzenal: custo por conversa resolvida. Subiu? Revisa prompt de sistema e modelo.
- Mensal: conversão em ação de receita. Abaixo do benchmark? Revisa oferta/gatilho, não o agente.
- Trimestral: retenção D30. Caindo? Reposicionamento, não ajuste fino.
Veja essas métricas no seu hub
14 dias grátis. Dashboard com as 4 métricas certas — sem 30 gráficos inúteis.
Criar conta
Dashboard bom não tem mais gráficos. Tem os gráficos certos, com as perguntas certas na frente. O resto é ruído bonito.
Veja o post completo em memberai.pro/blog/analytics-que-importam.
Saiba mais: planos e preços · sobre a Member AI · cases reais · blog completo.