Exercício – Deteção de aterramento

Concluído

Implementar um agente de suporte ao cliente alimentado por IA é um divisor de águas para a Contoso Camping Store! Os clientes podem solicitar ao agente de suporte recomendações de produtos e orientações sobre como usar os produtos da Contoso Camping Store. No entanto, queremos garantir que o modelo forneça respostas fundamentadas no material de origem passado para o modelo.

Vamos testar prompts com o modelo para que possamos detetar a aterramento de sua saída.

Deteção de saída aterrada

Podemos fornecer uma fonte de aterramento, enviar um prompt e fornecer uma conclusão para testar a capacidade do modelo de detetar uma saída aterrada. Vamos tentar este teste com o custo de uma tenda.

  1. Na página Segurança de conteúdo, selecione Deteção de aterramento.

  2. Na seção Escolha uma tarefa, selecione Perguntas e respostas.

  3. Na seção Teste, digite o seguinte em cada caixa:

    • Fontes de aterramento – A tenda custa US $ 250

    • PromptCusto da tenda?

    • Conclusão$250

    Uma captura de tela das entradas de aterramento para aterramento. Uma fonte de aterramento, prompt e conclusão são fornecidos.

  4. Selecione Executar teste.

Dado que a fonte de aterramento e a saída de conclusão estão alinhadas, o modelo é capaz de detetar que a saída está aterrada.

Uma captura de tela dos resultados de aterramento. Os resultados mostram que não foi detetada qualquer falta de fundamento.

Deteção de saída sem terra

Como os modelos às vezes podem fornecer informações incorretas, queremos garantir que o modelo possa detetar se uma saída não está fundamentada. Como o exemplo anterior, podemos testar uma saída sem fundamento, mas, em vez disso, fornecemos uma Conclusão que contradiz ou não está alinhada com a Fonte de aterramento.

  1. Na seção Teste, digite o seguinte em cada caixa:

    • Fontes de aterramento – A tenda custa US $ 250

    • PromptCusto da tenda?

    • Conclusão$350

    Uma captura de tela das entradas de aterramento para a falta de fundamento. Uma fonte de aterramento, prompt e conclusão são fornecidos.

  2. Selecione Executar teste.

Como a Conclusão fornece o custo incorreto de uma tenda, a saída não é fundamentada e o modelo é capaz de detetar que a saída não está aterrada.

Uma captura de tela dos resultados de aterramento. Os resultados mostram que foi detetada falta de fundamento. Além disso, é fornecida uma anotação para indicar o conteúdo não fundamentado.

Geração de saída resumida

Para um agente de suporte ao cliente, queremos garantir que o modelo possa gerar resultados resumidos. Por exemplo, se um cliente fornecer um longo relato dos problemas que experimentou com um produto. Queremos garantir que o modelo sintetize com precisão o contexto dentro da consulta do cliente e, em troca, forneça resultados resumidos fundamentados. Podemos testar a fundamentação passando a consulta do cliente como a Fonte de Aterramento e fornecendo uma Conclusão com base no contexto da consulta.

  1. Na seção Escolha uma tarefa, selecione Resumir.

  2. Na seção Teste, digite o seguinte em cada caixa:

    • Fontes - de aterramento Comprei recentemente três tendas TrailMaster X4 para uma viagem de acampamento em família. Enquanto no geral eles tiveram um bom desempenho, notei alguns problemas menores. Os zíperes de uma das barracas pareciam um pouco pegajosos, e havia um pequeno rasgo no saco de armazenamento. Trata-se de pequenas preocupações, mas pensei que deveria chamá-las à vossa atenção.

    • ConclusãoComprei 4 tendas que tiveram um bom desempenho sem problemas.

    Uma captura de tela das entradas de aterramento para a tarefa de sumarização.

  3. Selecione Executar teste.

Dado que o cliente comprou 3 tendas e teve alguns pequenos problemas com as tendas, a conclusão não está fundamentada. O modelo foi capaz de detetar que a saída resumida não tinha fundamento.

Uma captura de tela dos resultados de aterramento para a tarefa de sumarização. Os resultados mostram que foi detetada falta de fundamento. Além disso, é fornecida uma anotação para indicar o conteúdo não fundamentado.