Exercício – Deteção de aterramento
Implementar um agente de suporte ao cliente alimentado por IA é um divisor de águas para a Contoso Camping Store! Os clientes podem solicitar ao agente de suporte recomendações de produtos e orientações sobre como usar os produtos da Contoso Camping Store. No entanto, queremos garantir que o modelo forneça respostas fundamentadas no material de origem passado para o modelo.
Vamos testar prompts com o modelo para que possamos detetar a aterramento de sua saída.
Deteção de saída aterrada
Podemos fornecer uma fonte de aterramento, enviar um prompt e fornecer uma conclusão para testar a capacidade do modelo de detetar uma saída aterrada. Vamos tentar este teste com o custo de uma tenda.
Na página Segurança de conteúdo, selecione Deteção de aterramento.
Na seção Escolha uma tarefa, selecione Perguntas e respostas.
Na seção Teste, digite o seguinte em cada caixa:
Fontes de aterramento – A tenda custa US $ 250
Prompt – Custo da tenda?
Conclusão – $250
Selecione Executar teste.
Dado que a fonte de aterramento e a saída de conclusão estão alinhadas, o modelo é capaz de detetar que a saída está aterrada.
Deteção de saída sem terra
Como os modelos às vezes podem fornecer informações incorretas, queremos garantir que o modelo possa detetar se uma saída não está fundamentada. Como o exemplo anterior, podemos testar uma saída sem fundamento, mas, em vez disso, fornecemos uma Conclusão que contradiz ou não está alinhada com a Fonte de aterramento.
Na seção Teste, digite o seguinte em cada caixa:
Fontes de aterramento – A tenda custa US $ 250
Prompt – Custo da tenda?
Conclusão – $350
Selecione Executar teste.
Como a Conclusão fornece o custo incorreto de uma tenda, a saída não é fundamentada e o modelo é capaz de detetar que a saída não está aterrada.
Geração de saída resumida
Para um agente de suporte ao cliente, queremos garantir que o modelo possa gerar resultados resumidos. Por exemplo, se um cliente fornecer um longo relato dos problemas que experimentou com um produto. Queremos garantir que o modelo sintetize com precisão o contexto dentro da consulta do cliente e, em troca, forneça resultados resumidos fundamentados. Podemos testar a fundamentação passando a consulta do cliente como a Fonte de Aterramento e fornecendo uma Conclusão com base no contexto da consulta.
Na seção Escolha uma tarefa, selecione Resumir.
Na seção Teste, digite o seguinte em cada caixa:
Fontes - de aterramento Comprei recentemente três tendas TrailMaster X4 para uma viagem de acampamento em família. Enquanto no geral eles tiveram um bom desempenho, notei alguns problemas menores. Os zíperes de uma das barracas pareciam um pouco pegajosos, e havia um pequeno rasgo no saco de armazenamento. Trata-se de pequenas preocupações, mas pensei que deveria chamá-las à vossa atenção.
Conclusão – Comprei 4 tendas que tiveram um bom desempenho sem problemas.
Selecione Executar teste.
Dado que o cliente comprou 3 tendas e teve alguns pequenos problemas com as tendas, a conclusão não está fundamentada. O modelo foi capaz de detetar que a saída resumida não tinha fundamento.