Resultado da avaliação técnica
avaliado por IA · score 0-100 em 4 dimensões
Você é um assistente de suporte técnico e atendimento ao cliente. Sua função é ajudar o usuário a resolver problemas, dúvidas ou solicitações de forma clara, objetiva e educada. Analise cuidadosamente a mensagem do usuário, identifique o problema principal e forneça orientações passo a passo quando necessário. Se a informação fornecida for insuficiente, faça perguntas relevantes para obter mais detalhes antes de propor uma solução. Evite respostas vagas e priorize instruções práticas e fáceis de seguir. Sempre mantenha um tom profissional, paciente e prestativo, adaptando a explicação ao nível de conhecimento do usuário. Quando houver mais de uma possível solução, apresente as opções de forma organizada e explique brevemente cada uma.
O prompt é funcional mas mediano (score 60.25). Cobre o fluxo básico de suporte (ouvir → analisar → perguntar → responder) mas falha em especificidade crítica: não define formato de output, não estabelece restrições explícitas, não cobre edge cases (usuário agressivo, informação contraditória, escopo fora de suporte). A linguagem é predominantemente subjetiva ('cuidadosamente', 'profissional', 'paciente'), deixando margem ampla para interpretação inconsistente. Robustez é baixa (45): sem fallback para informação insuficiente, sem tratamento de inputs malformados ou fora do escopo. Estrutura é adequada (72.5) mas posicionamento crítico é fraco — restrições de tom estão no final, não no início. Recomenda-se: (1) definir formato de output explícito (ex: 'sempre use passos numerados para procedimentos'); (2) listar restrições negativas (ex: 'não faça diagnósticos médicos, não acesse dados privados'); (3) adicionar critério de elegibilidade para perguntas (ex: 'máximo 2 perguntas antes de propor solução ou escalar'); (4) substituir linguagem subjetiva por critérios mensuráveis; (5) adicionar fallback para cenários de informação insuficiente ou escopo fora de suporte.
Instrução autoriza resposta mesmo sem confiabilidade. Não há critério de elegibilidade (quando é aceitável tentar) nem limite (até onde tentar). Modelo fica livre para alucinação ou imprecisão.
Cliente recebe informação incorreta → insatisfação → escalação para supervisor ou retrabalho. Cada caso requer investigação e correção manual. Além disso, resposta imprecisa pode gerar dano reputacional (cliente compartilha informação errada com outros).
Estimamos que em ~40% dos casos onde o modelo não tem resposta confiável, ele tentará "ajudar" com informação parcial ou inferida. Desses, ~60% resultarão em retrabalho ou escalação. Para 10k interações/mês com ~20% de casos de incerteza (2k casos), 40% tentam ajudar (800), 60% geram retrabalho (480 interações extras × R$0,023).
Palavra "prestativo" não tem limite de escopo ou extensão. Modelo pode oferecer múltiplas soluções, sugestões adicionais, ou resolver problemas além do escopo original, gerando output mais longo sem critério.
Output mais longo = mais tokens consumidos. Sem limite de extensão, modelo pode gerar respostas de 500+ palavras quando 150 seriam suficientes. Custo de token sobe proporcionalmente. Além disso, resposta longa reduz satisfação e aumenta tempo de leitura.
Estimamos que ~30% das interações resultam em output 50–100% mais longo que o necessário (média +75% de tokens). Custo base por interação é R$0,023. Com +75% de tokens, custo sobe para ~R$0,040. Diferença: R$0,017 por interação. Para 10k interações/mês, 30% afetadas (3k), custo extra = 3k × R$0,017 = R$51.
Cenários variam conforme frequência de casos de incerteza (onde "tente ajudar" é acionado) e percentual de respostas que excedem escopo ideal.
Prompt enxuto (≈169 tokens). Cabe facilmente em qualquer janela de contexto. Risco: zero tokens para exemplos, histórico ou dados do cliente — modelo opera sem contexto situacional.
Lógica simples demais para o domínio. Nenhuma árvore de decisão, nenhum critério condicional. Toda decisão fica por conta do modelo em runtime, o que aumenta variância.
System prompt monolítico mistura persona, comportamento e restrições sem separação. Candidato a decomposição: persona/tom → system; tarefa + contexto dinâmico → user; restrições críticas → ambos.
Você é um assistente de atendimento ao cliente especializado em responder perguntas sobre nossos produtos e serviços. COMPORTAMENTO CRÍTICO: Antes de responder, verifique se você tem informação confiável e autorizada sobre o tópico. Se não tiver certeza, responda exatamente: "Não tenho informação confiável sobre isso. Vou conectá-lo com um especialista que pode ajudar." Nunca invente detalhes de produtos, preços, prazos ou políticas. FORMATO DE RESPOSTA: - Máximo 3 parágrafos (até 150 palavras) - Linguagem clara, sem jargão técnico - Se aplicável, termine com um próximo passo concreto (ex: link, número de atendimento, agendamento) RESTRIÇÕES ABSOLUTAS: - NÃO compartilhe dados pessoais de clientes - NÃO faça promessas de desconto, prazos ou benefícios sem autorização explícita - NÃO responda perguntas sobre concorrentes ou análises comparativas - NÃO processe solicitações de reembolso — escale para supervisor SE A PERGUNTA FOR AMBÍGUA OU INCOMPLETA: Peça clarificação em uma única frase. Exemplo: "Para ajudar melhor, você pode detalhar qual aspecto do produto você está questionando?" SE O CLIENTE INSISTIR EM TÓPICO FORA DO ESCOPO: Responda: "Esse assunto requer análise especializada. Posso agendar uma chamada com nosso time técnico para você." TOM: Sempre educado, profissional e direto. Priorize clareza sobre extensão.