Análise de conversas
Financiamento e uso de IA
IA incluída usa créditos REDA. Traga sua própria IA usa a conta de provedor da sua organização, cobrada diretamente pelo provedor. A licença define um modelo para toda a organização. Nos dois, o REDA AI governa ferramentas e ações configuradas no Salesforce. Configure a licença e as contas de IA.
Confira Funding Mode, AI Connection e AI Model da conversa. A exibição Customer AI Account encontra conversas financiadas por conta própria. Seus créditos medidos são unidades de uso, não descontos de uma franquia REDA nem uma fatura. Alterar conta efetiva, modelo ou financiamento exige nova conversa para sessões interativas afetadas. Veja uso e mudanças de conta.
O recurso Análise de conversas da REDA AI permite que os administradores entendam profundamente como as conversas individuais estão usando créditos e onde existem oportunidades de otimização. Ao analisar uma conversa, você obtém insights sobre a eficiência dos seus agentes, identifica interações custosas, detecta problemas de configuração e recebe recomendações geradas por IA para melhorias. A análise é sob demanda (não automática) — os administradores escolhem deliberadamente quais conversas analisar, pagando um custo de crédito fixo e reduzido, único, para desbloquear insights detalhados.
Como funciona
Cada registro de conversa na REDA AI armazena uma transcrição completa de todas as mensagens e chamadas de ferramentas. Ao clicar no botão Analisar Conversa, o sistema:
- Processa todo o histórico da conversa e o uso de tokens mensagem por mensagem.
- Calcula o consumo de créditos por mensagem e identifica quais ferramentas foram chamadas em cada turno.
- Calcula métricas globais de eficiência e identifica padrões de otimização.
- Gera uma classificação de eficiência (Ótima, Boa, Requer Revisão ou Custo Alto) com base nos créditos por troca de mensagens.
- Produz sugestões acionáveis tanto para mensagens individuais quanto para a configuração geral do agente.
Os resultados da análise são exibidos em um detalhamento completo que os administradores podem usar para ajustar agentes, alterar atribuições de ferramentas, refinar prompts ou reconsiderar estratégias de canal.
Acessando a Análise de conversas
- Abra o app REDA AI e navegue até Conversas (ou abra um agente e vá até a lista relacionada de Conversas).
- Clique em um registro de conversa para abri-lo.
- Clique no botão Analisar Conversa.
- Aguarde alguns segundos até a análise ser concluída.
- Revise a classificação de eficiência, o detalhamento por mensagem, as métricas de tokens e as sugestões de otimização.
Classificações de eficiência
A classificação de eficiência classifica o custo-benefício da conversa com base nos créditos por troca de mensagens (mensagem enviada pelo usuário, resposta do agente):
| Classificação | Créditos por Troca | Interpretação |
|---|---|---|
| Ótima | ≤ 3, e sem consultas de esquema | Excelente eficiência. O agente está respondendo de forma concisa, chamando ferramentas com critério e não desperdiçando créditos. Ótimo também exige que a conversa não tenha feito chamadas a describe_object nem a get_picklist_values — uma conversa barata que ainda assim consulta o esquema é classificada como Boa, porque essa consulta deveria estar em um prompt de esquema. Nenhuma ação imediata é necessária. |
| Boa | ≤ 6 | Desempenho sólido. O agente é eficiente, mas há espaço para pequenas melhorias. Considere as sugestões fornecidas. |
| Requer Revisão | ≤ 10 | Custos moderados. O agente ou a conversa revelou ineficiências — muitas chamadas de ferramentas, respostas longas ou consultas evitáveis. Investigue as sugestões e ajuste a configuração do agente. |
| Custo Alto | > 10 | Interação cara. O agente consumiu muitos créditos por troca, provavelmente devido ao carregamento excessivo de ferramentas, geração de respostas longas ou prompting ineficiente. Priorize as otimizações. |
Detalhamento por mensagem
Cada mensagem no relatório de análise inclui:
- Prévia do Conteúdo da Mensagem: Os primeiros 80 caracteres da mensagem, ajudando você a identificar rapidamente qual turno está revisando.
- Créditos Usados: O custo em créditos daquela mensagem, incluindo qualquer sobretaxa de chamada de ferramenta.
- Ferramentas Chamadas: Uma lista das ferramentas que o agente invocou naquele turno (por exemplo, describe_object, query_related_records, get_picklist_values).
- Nível com Código de Cores: Indicadores visuais mostram a intensidade de créditos — verde (baixa, 0–2 créditos), âmbar (média, 2–6 créditos), vermelho (alta, 6+ créditos).
- Sugestões por Mensagem: Recomendações específicas para aquele turno (por exemplo, "considere adicionar este esquema ao prompt para evitar chamadas repetidas de describe_object").
Sugestões de otimização global
Além dos insights por mensagem, a análise fornece recomendações no nível da organização:
- Chamadas de Ferramentas Evitáveis: Identifica padrões em que o agente chama repetidamente describe_object ou get_picklist_values. Sugestão: Adicione o esquema do objeto ou definições de picklist ao prompt do sistema do agente ou aos campos de contexto para eliminar essas consultas custosas.
- Carregamento Excessivo de Ferramentas: Se o agente tiver mais de 15 ferramentas atribuídas, a análise sinaliza isso. Sugestão: Reduza o conjunto de ferramentas apenas às mais essenciais — menos ferramentas = menos decisões que o agente precisa tomar, menor consumo de créditos.
- Eficiência de Cache: Indica quando o cache de prompt está reduzindo o custo em conteúdo repetido. Se conversas semelhantes se repetem sem se beneficiar do cache, a sugestão recomendará estabilizar o prompt do sistema entre mensagens.
Métricas principais
| Métrica | Descrição |
|---|---|
| Média de Créditos por Troca | O custo médio de cada par de mensagens usuário-IA. Esta é a principal métrica de eficiência — quanto menor, melhor. |
| Custo Total da Conversa | Soma de todos os créditos consumidos nesta conversa (excluindo o custo mínimo em créditos da execução da própria análise). |
| Contagem de Iterações de Ferramentas | Número de vezes que o agente percorreu chamadas de ferramentas em um único turno. Contagens altas geralmente indicam que o agente estava refinando sua busca ou tomada de decisão, aumentando o custo da conversa. |
Padrões comuns e ações
Padrão 1: Consultas de Esquema Evitáveis
Constatação: A conversa mostra chamadas repetidas de describe_object e get_picklist_values para os mesmos objetos.
Ação: Atualize o prompt do sistema do agente para incluir o esquema do objeto (por exemplo, "O objeto Oportunidade possui os campos: Amount, Close_Date, Account_ID..."). Alternativamente, adicione esses objetos aos Campos de Contexto do agente, que incorporam automaticamente seu esquema em cada requisição.
Padrão 2: Conjunto de Ferramentas Excessivo
Constatação: O relatório de eficiência sinaliza 20+ ferramentas atribuídas ao agente, mas a conversa usou apenas 3 delas.
Ação: Revise as Atribuições de Ferramentas do agente e remova as ferramentas pouco usadas. Menos ferramentas = decisões mais simples para a IA, menor uso de tokens, respostas mais rápidas.
Padrão 3: Respostas Longas e Prolixas
Constatação: O agente está gerando respostas extensas, elevando a média de créditos por troca.
Ação: Atualize a persona ou o prompt do agente para incentivar a concisão (por exemplo, "Responda em 2–3 frases" ou "Seja direto e focado em ação"). Para agentes automatizados, adicione "Responda em modo automatizado — breve e objetivo."
Padrão 4: Oportunidade de Eficiência de Cache
Constatação: As sugestões de otimização sinalizam baixo reaproveitamento de cache apesar de consultas semelhantes se repetirem.
Ação: Verifique se o prompt do sistema do agente é estável entre mensagens. Timestamps por turno, ordenação aleatória ou campos de contexto que mudam constantemente podem invalidar o cache do prompt. Estabilize o conteúdo do prompt para maximizar o reaproveitamento de cache em conversas repetidas.
Usando a Análise de conversas para melhorar agentes
Siga este fluxo de trabalho para otimizar seus agentes:
- Selecione Conversas de Amostra: Escolha de 3 a 5 conversas representativas e analise cada uma. Procure padrões comuns.
- Priorize as Constatações: Identifique os maiores fatores de custo — chamadas de ferramentas evitáveis, conjuntos de ferramentas excessivos ou respostas prolixas.
- Faça Mudanças Direcionadas: Atualize o agente (refine o prompt, ajuste as ferramentas, adicione esquema ao contexto). Teste em novas conversas.
- Reanalise: Execute a análise nas conversas seguintes para medir o impacto das suas mudanças.
- Itere: Repita até atingir a classificação de eficiência desejada.
Casos de uso da Análise de conversas
- Orçamento de Custos: Analise conversas de agentes de alto volume para estimar custos mensais. Se os custos estiverem muito altos, otimize antes de expandir para mais usuários.
- Comparação de Agentes: Analise conversas de agentes diferentes (suporte, vendas, interno) para identificar quais são mais eficientes. Compartilhe boas práticas com as equipes dos agentes de desempenho inferior.
- Eficiência por Canal: Compare os custos de conversa entre canais (Interno vs. Externo vs. Comunidade) para decidir onde investir em otimização.
- Solução de Problemas: Quando um usuário relata que o agente está lento ou dando respostas ruins, analise a conversa dele. Sobrecarga de ferramentas ou chamadas excessivas de ferramentas costumam indicar problemas de configuração.
- Conformidade e Auditoria: Analise conversas que envolvam dados sensíveis para confirmar que o agente está tratando as consultas adequadamente e não chamando ferramentas desnecessárias que expõem dados.
Boas práticas
- Analise Regularmente: Torne a Análise de conversas parte da sua rotina de administração semanal ou mensal. Tendências surgem com o tempo.
- Amostre Entre Agentes e Datas: Não analise apenas as conversas mais antigas ou mais recentes. Faça amostragem entre todos os seus agentes ativos e intervalos de datas para obter um quadro representativo.
- Documente as Mudanças: Quando otimizar um agente com base na análise, registre a mudança na descrição do agente ou em um changelog. Isso ajuda administradores e partes interessadas a acompanhar as melhorias do agente.
- Compartilhe Insights: Apresente as constatações da análise à sua equipe — mostre quais agentes são eficientes e quais precisam de trabalho. Use os dados para justificar mudanças de configuração.
- Defina Metas de Eficiência: Busque classificações "Boa" ou "Ótima" como referência. Conversas "Requer Revisão" são oportunidades de aprendizado; conversas "Custo Alto" merecem investigação imediata.
Solução de problemas
Entender a mudança de créditos Econômico
O uso comum do nível Econômico agora aplica multiplicador de 0,40 à taxa base de créditos. Com os mesmos tokens e taxas, um exemplo de 100 créditos base consome 40 no Econômico. Com o multiplicador anterior de 0,10 consumia 10: o débito é quatro vezes o anterior e 60% inferior ao base. Muda o consumo, não o preço da assinatura. A pré-extração de arquivos é cobrada separadamente à taxa integral. Um fallback de provedor pode usar outro nível efetivo; confira a transação real em vez de aplicar 0,40 à operação mista inteira. Novas transações registram Nível de processamento; o histórico não é preenchido retroativamente. Econômico exige consentimento e licença/configuração compatível. Sem consentimento, a solicitação é recusada, não processada silenciosamente em outro nível.