Partilhar via

Guia de início rápido: introdução ao uso de chats habilitados para visão no portal do Azure AI Foundry

  • Artigo

Importante

Os itens marcados (visualização) neste artigo estão atualmente em visualização pública. Essa visualização é fornecida sem um contrato de nível de serviço e não a recomendamos para cargas de trabalho de produção. Algumas funcionalidades poderão não ser suportadas ou poderão ter capacidades limitadas. Para obter mais informações, veja Termos Suplementares de Utilização para Pré-visualizações do Microsoft Azure.

Use este artigo para começar a usar o Azure AI Foundry para implantar e testar um modelo de conclusão de bate-papo com compreensão de imagem.

Taxas de uso adicionais podem ser aplicadas ao usar modelos de conclusão de bate-papo com funcionalidade de visão.

Pré-requisitos

  • Uma assinatura do Azure - Crie uma gratuitamente.
  • Depois de ter sua assinatura do Azure, crie um recurso do Azure OpenAI .
  • Um hub do Azure AI Foundry com seu recurso do Azure OpenAI adicionado como uma conexão.

Prepare os seus conteúdos multimédia

Você precisa de uma imagem para concluir este início rápido. Você pode usar esta imagem de exemplo ou qualquer outra imagem disponível.

Foto de um acidente de carro que pode ser usada para completar o início rápido.

Implantar um modelo de chat habilitado para visão

  1. Entre no Azure AI Foundry e selecione o hub no qual você gostaria de trabalhar.
  2. No menu de navegação esquerdo, selecione Modelos + pontos de extremidade e selecione + Implantar modelo.
  3. Na página de seleção de modelo, selecione um modelo habilitado para visão como GPT-4o. Na janela exibida, selecione um nome e um tipo de implantação. Verifique se seu recurso do Azure OpenAI está conectado.
  4. Selecione Implementar.
  5. Em seguida, selecione seu novo modelo e selecione Abrir no playground. No playground de bate-papo, a implantação criada deve ser selecionada no menu suspenso Implantação .

Prompts de imagem

Nesta sessão de chat, você instrui o assistente para ajudá-lo a entender as imagens que você inserir.

  1. Na caixa de texto de contexto no painel Configuração , forneça este prompt para orientar o assistente: "You're an AI assistant that helps people find information." Ou, você pode personalizar o prompt para sua imagem ou cenário.
  2. Selecione Aplicar alterações para salvar as alterações.
  3. No painel de sessões de chat, selecione o botão de anexo e, em seguida, Carregar imagem. Escolha a sua imagem.
  4. Adicione o seguinte prompt no campo de chat: "Describe this image"e, em seguida, selecione o ícone de envio para enviá-lo.
  5. O ícone de envio é substituído por um botão de parada. Se você selecioná-lo, o assistente para de processar sua solicitação. Para este início rápido, deixe o assistente terminar sua resposta.
  6. O assistente responde com uma descrição da imagem.
  7. Faça uma pergunta de acompanhamento relacionada com a análise da sua imagem. Você poderia entrar, "What should I highlight about this image to my insurance company?".
  8. Você deve receber uma resposta relevante semelhante à mostrada aqui: 
    When reporting the incident to your insurance company, you should highlight the following key points from the image:  

1. **Location of Damage**: Clearly state that the front end of the car, particularly the driver's side, is damaged. Mention the crumpled hood, broken front bumper, and the damaged left headlight.  

2. **Point of Impact**: Indicate that the car has collided with a guardrail, which may suggest that no other vehicles were involved in the accident.  

3. **Condition of the Car**: Note that the damage seems to be concentrated on the front end, and there is no visible damage to the windshield or rear of the car from this perspective.  

4. **License Plate Visibility**: Mention that the license plate is intact and can be used for identification purposes.  

5. **Environment**: Report that the accident occurred near a roadside with a guardrail, possibly in a rural or semi-rural area, which might help in establishing the accident location and context.  

6. **Other Observations**: If there were any other circumstances or details not visible in the image that may have contributed to the accident, such as weather conditions, road conditions, or any other relevant information, be sure to include those as well.  

Remember to be factual and descriptive, avoiding speculation about the cause of the accident, as the insurance company will conduct its own investigation.

Ver e exportar código

A qualquer momento da sessão de chat, você pode ativar a opção Mostrar JSON bruto na parte superior da janela de bate-papo para ver a conversa formatada como JSON. Veja como é no início da sessão de bate-papo de início rápido:

[
	{
		"role": "system",
		"content": [
			"You are an AI assistant that helps people find information."
		]
	},
]

Clean up resources (Limpar recursos)

Para evitar incorrer em custos desnecessários do Azure, você deve excluir os recursos criados neste início rápido se eles não forem mais necessários. Para gerenciar recursos, você pode usar o portal do Azure.

Próximos passos