Referências e fontes
De onde veio a resposta do agente e como conferir o trecho exato que a originou.
Quando o Agente responde com base em Coleções, a resposta traz um bloco de Referências ao final, apontando os documentos usados.
É o que separa uma resposta verificável de uma resposta plausível. Conferir a referência leva alguns segundos e resolve a maior parte das dúvidas sobre confiabilidade.
Abrir um fragmento
Clicar em uma referência abre o painel Fragmentos do documento, com os trechos daquele documento que a busca considerou relevantes para a sua pergunta.
O painel mostra o nome do arquivo, quantos fragmentos foram encontrados e uma pontuação de relevância. A pontuação é do mecanismo de busca, não uma avaliação de correção: um fragmento com nota alta é o mais parecido com a pergunta, não necessariamente o que contém a resposta certa.
Como ler o resultado
Três situações, e o que cada uma indica:
- A resposta cita um trecho que confere: o caminho funcionou de ponta a ponta.
- A resposta cita um trecho que não sustenta o que foi dito: o modelo extrapolou. Vale registrar como resposta insatisfatória.
- Não há bloco de Referências: o Agente respondeu sem consultar documento nenhum.
Quando não há referências
A ausência do bloco tem três causas possíveis, em ordem de frequência:
- O Agente não tem Coleções associadas. Confirme na aba Coleções do painel de informações.
- Os documentos ainda não estão prontos. Documentos em extração ou indexação não participam das respostas.
- A busca não encontrou nada relevante. A pergunta usa termos que não aparecem nos documentos.
Um Agente sem Coleções responde assim mesmo, usando o que o modelo aprendeu no treino. A resposta parece igual, só não tem referências. É o caso em que mais vale conferir antes de agir.
Fazer a busca encontrar
A busca compara o conteúdo da pergunta com o conteúdo dos documentos, não com títulos ou nomes de arquivo.
Perguntar usando os termos que aparecem dentro do documento funciona melhor do que citar o nome dele. "Qual o prazo de reembolso de despesas de viagem" encontra mais que "o que diz a política de despesas".
Próximos passos
- Entenda o mecanismo por trás disso em Coleções e conhecimento.
- Registre uma resposta sem apoio em Conversas.