共用方式為


從不同的 Azure AI Foundry 專案或中樞取用無伺服器 API 端點

在本文中,您會了解如何在與用於建立部署的專案或中樞不同的專案或中樞中,設定現有的無伺服器 API 端點。

重要

處於預覽狀態的模型會在模型目錄中的模型卡片上標示為 預覽

模型目錄中的特定模型可以部署為無伺服器 API。 這種部署可讓您以 API 形式取用模型,而不必在您的訂用帳戶上裝載模型,同時讓組織保持所需的企業安全性與合規性。 此部署選項不需要您的訂用帳戶提供配額。

在不同於用於建立部署的專案或中樞内取用無伺服器 API 端點的需求,可能會發生下列情況:

  • 您想要將部署集中到指定的專案或中樞,並從組織中的不同專案或中樞取用它們。
  • 您必須在特定 Azure 區域中的中樞部署模型,而該模型在該區域可使用無伺服器部署。 不過,您需要從另一個區域取用它,但這特定模型在此區域無法使用無伺服器部署。

必要條件

建立無伺服器 API 端點連線

請遵循這些步驟,以建立連線:

  1. 連線至部署端點的專案或中樞:

    移至 Azure AI Foundry ,並流覽至您要在其中部署端點的專案。

  2. 取得您要連線之端點的端點 URL 和認證。 在這個範例中,您會取得名稱為 meta-llama3-8b-qwerty 的端點的詳細資料。

    1. 從 AI Foundry 入口網站中項目的左側提要欄位中,移至 [我的資產>模型 + 端點] 以查看專案中的部署清單。

    2. 選取您要連線至的部署。

    3. 複製 目標 URI金鑰 的值。

  3. 現在,連線到您要在其中建立連線的專案或中樞:

    前往需要建立連線的專案。

  4. 在專案中建立連線:

    1. 從 AI Foundry 入口網站中項目的左側提要字段中,選取 [管理中心]。

    2. 從管理中心的左側提要字段中,選取 [ 已連線的資源]。

    3. 選取新增連線

    4. 選取 [無伺服器模型]

    5. 在 [目標 URI]上貼上您先前複製的值。

    6. 在 [金鑰]上貼上您先前複製的值。

    7. 為連線指定名稱,此案例中為 meta-llama3-8b-connection

    8. 請選取新增連線

  5. 現在,連線已可供取用。

  6. 若要驗證連線是否已在運作:

    1. 返回 AI Foundry 入口網站中的專案。

    2. 從項目的左側提要字段中,移至 [建置並自定義>提示流程]。

    3. 選取 [建立] 以建立新流程。

    4. 在 [聊天流程] 方塊中選取 [建立]

    5. 為您的 [提示流程] 命名,並選取 [建立]

    6. 從圖表中選取 [聊天] 節點,以前往 [聊天] 區段。

    7. 針對 [連線],請開啟挑選清單,選取您剛才建立的連線,此案例為 [meta-llama3-8b-connection]

    8. 在頂端瀏覽列選取 [啟用計算工作階段],以啟用提示流程自動執行階段。

    9. 選取 [聊天] 選項。 您現在可以傳送訊息並取得回應。