共用方式為


影像提示工程技術

若要發揮具有視覺功能之 GPT-4 Turbo 的完整潛力,請務必根據您的特定需求量身打造提示。 下列是增強提示精確度和效率的部分指導方針。

建立影像提示的基本概念

  • 內容特定性:為手頭上的案例新增內容,讓模型更加了解適當的輸出應具有何種內容。 這種特定程度有助於專注於相關內容,並避免多餘的細節。

  • 任務導向提示:將焦點放在特定任務上,可協助模型在開發輸出的同時,將該觀點納入考量。

  • 處理拒絕情形:當模型指出無法執行工作時,改善提示可能是有效的解決方法。 更具體的提示可引導模型更清楚了解內容,並更妥善地執行工作。 請記得下列部分提示:

    • 要求所產生回應的說明,以增強模型輸出的透明度
    • 如果使用單一影像提示,請將影像放在文字之前
    • 要求模型先在詳細描述影像,然後藉由該描述完成您的特定工作
  • 新增範例:新增可代表要尋找之回應類型的範例

  • 細分要求:嘗試逐步細分複雜的要求,建立可管理的子目標

  • 定義輸出格式:清楚提及輸出所需的格式,例如 Markdown、JSON、HTML 等。您也可以建議回應的特定結構、長度或特定屬性。

範例提示輸入和輸出

有許多方法可以建立系統提示,根據您的需求專門量身打造輸出。 下列範例輸入和輸出會示範調整提示如何提供不同的結果。 請使用這些影像自行試用模型,並在 Azure AI Studio 遊樂場中調整系統提示。

內容特定性

內容可協助改善來自模型的回應。 例如,如果您正在處理產品目錄的影像描述,請確定提示會以清楚且簡潔的方式反映這一點。 與「描述用於戶外健行產品目錄的影像,專注描寫熱情和專業精神」類似的提示,可引導模型產生準確且與內容相關的回應。

基本提示 模型輸出
森林中露營帳篷和椅子的照片。 此影像展現了哪些內容? 該圖顯示森林區域中的露營裝備。 圖中有一頂黃色帳篷,兩把摺疊的露營椅 (一張紅色,一張藍色),以及一張便攜式露營桌。 周邊區域樹木茂密,表明營地位於林區。
更新的提示 模型輸出
森林中露營帳篷和椅子的照片。 描述用於戶外健行產品目錄的影像,專注描寫熱情和專業精神。 「使用我們的高級健行和露營裝備,展開您的下一場戶外冒險! 圖中顯示充滿鮮豔又寬敞的帳篷,旨在為您提供可盡享自然環境寧靜感的戶外家園。 產品採用頂級材質製作,在任何天氣中都持久耐用並舒適無比。 我們還提供超舒適的輕量級摺疊椅來搭配帳篷,款式有令人矚目的豔紅色和平靜的藍色可供選擇,非常適合在探索一整天的自然環境後用於放鬆。 另外,請別忘了我們堅固的便攜式桌子,這是享用美味戶外餐點或在星空下玩牌所需的完美設備。 透過可靠的產品提升露營體驗,我們的優質產品能夠與大自然的完美融合!」

工作導向提示

為模型提供要遵循的特定工作,是改善回應的方式之一。 在此範例中,這項提示會引導模型專注於對保險評估至關重要的元素,進而改善精確度和相關性。

基本提示 模型輸出
一輛汽車撞上電線桿的照片。 此影像展現了哪些內容? 下圖顯示一輛發生事故的銀色轎車。 汽車的前端受損,引擎蓋凸起,保險桿部分分離。 這輛汽車正倚靠著人行道上的一根電線桿,發動機區域出現可見的煙霧,表明剛剛出現車禍。 場景似乎是一條住宅街道,就如背景中存在的房屋、整齊修剪的樹籬和人行道所示。
更新的提示 模型輸出
一輛汽車撞上電線桿的照片。 分析汽車保險報告的這個汽車損壞影片,專注於識別和詳細說明損壞狀況 在提供的影像中,我們觀察到一輛銀色轎車,該轎車前端出現重大損傷。 車輛的引擎蓋明顯凸起,前保險桿嚴重變形,一部分脫離底盤。 右前燈總成似乎出現損壞或脫落。 前散熱器區域也有明顯的損壞情形。 汽車與電線桿接觸,顯示車輛以相對較低或中等速度與電線桿發生正面碰撞。 引擎室散發煙霧,代表在作出全面性的評估之前,可能需要進一步檢查潛在機械或電子損壞。 在此影像中,安全氣囊似乎並未彈出。 車輛會需要經過詳細檢查,徹底評估結構和機械損壞程度,以得出完整的保險報告。

處理拒絕情形

當您收到模型的拒絕輸出時,有數種方式可以調整輸入以產生更適當的回應。 下列是如何處理拒絕情形並取得進展的範例。

基本提示 模型輸出
一張餐桌與幾盤食物的照片。 規劃這頓餐點 很抱歉,我無法提供該資訊。
後續提示 模型輸出
您需要哪些資訊? 我為先前造成的困擾道歉。 若要根據提供的影像來規劃餐點,我需要知道下列事項:
用餐人數,用以確保每個人都有足夠食物。
需要考量的任何飲食限制或偏好 (例如素食者、無麩質飲食、過敏症)。
計劃用餐的場合或類型 (例如休閒午餐、晚宴)。
在食物類別和營養方面所需的膳食平衡。
有了這些資訊,我可以協助建議如何分菜、創造平衡的膳食,並確保膳食符合所有食客的需求。

新增範例

基本提示 模型輸出
一隻邊境牧羊犬躺在草地上的照片。 這隻狗屬於什麼品種,平均體重和身高為何? 影像中的狗似乎是邊境牧羊犬。 邊境牧羊犬以智力、靈活度和放牧能力而聞名。邊境牧羊犬的平均體重通常約為 30-45 磅 (14-20 公斤)。 至於身高,邊境牧羊犬的肩高通常約為 18-22 英吋 (46-56 公分)。 這些數字可能會根據每隻狗的遺傳、飲食和活動水準而有所不同。 邊境牧羊犬是中等體型的犬種,擁有比例良好的身體和非常旺盛的精力。
更新的提示 模型輸出
問:這隻狗屬於什麼品種,平均體重和身高為何? 一隻博美犬坐在水面上方游泳池浮板上的照片。
答:品種:博美犬;平均體重:3-7 磅;平均身高:8-14 英吋
一隻鬥牛犬躺在草地上的照片。 答:品種: 英國鬥牛犬;平均體重:50-55 磅;平均身高:14-16 英吋 一隻邊境牧羊犬躺在草地上的照片。
答:品種:邊境牧羊犬;平均體重:30-45 磅;平均身高:18-22 英吋

細分要求

基本提示 模型輸出
食譜卡片的照片,內容詳細說明奶奶的酥脆蘋果派食譜。 此影像中有什麼? 圖像包含一張標題為「奶奶的酥脆蘋果派」的食譜卡片。 食譜被註解為感恩節傳統。 列出的食材如下:
  • 5-7 顆蘋果,去皮
  • 1 張 9 英吋餅皮
  • 3/4 杯糖
  • 1/2 茶匙肉桂
  • 少許鹽
  • 3 湯匙奶油

請注意,影像中未完整展示糖、麵粉和奶油的份量。 下列為參考資訊,標準分量的餅皮配料,通常涉及將糖、麵粉和奶油混合在一起,直到酥脆為止
更新的提示 模型輸出
食譜卡片的照片,內容詳細說明奶奶的酥脆蘋果派食譜。 您是 AI 助理,可協助建立購物清單和指示,以根據食譜準備食物。 請提供要購買的食材清單,然後提供根據食譜卡片準備食材的指示清單。 沒問題,以下是基於食譜卡的購物清單:
購物清單:
  1. 5-7 顆蘋果 (需適合烘焙的品種,如澳洲青蘋或蜜脆蘋果)
  2. 1 個現成餡餅皮 (9 英吋)
  3. 糖 (確保糖量足夠裝滿杯子的 1/2)
  4. 中筋麵粉 (確保麵粉足夠裝滿杯子的 3/4 )
  5. 磨碎的肉桂
  6. Salt
  7. 奶油 (確保有 3 湯匙份量的奶油)

備料指示:
  • 削蘋果:使用蔬果削皮器或水果刀,削去 5 到 7 個蘋果的果皮。
  • 去除蘋果果核並切片:將蘋果切成四分之一、移除果核,然後根據您偏好的派餅口感,將四分之一的蘋果切成薄片或果塊。
  • 量取配料:量取 3/4 杯糖、1/2 茶匙肉桂、少許鹽 (約1/8 茶匙),和 3 茶匙奶油。
  • 準備奶油:將奶油切成小塊,以便在食譜中使用。 冷的奶油通常更容易混合,所以請在需要前保持冷藏
  • 根據派餅食譜的指示預熱烤箱,以便在派餅完成後即可烘焙。
  • 請記得遵循酥脆蘋果派完整食譜中提供的任何其他準備或烘焙指示。

定義輸出格式

基本提示 模型輸出
熱帶地區帶游泳池的白色別墅照片。 描述此影像 下圖顯示一座豪華的白色別墅,部分建築物上有傳統的茅草屋頂,前景有一個清澈的藍色游泳池。 游泳池邊排著太陽椅,令人感到十分放鬆。 該建築物包括優雅的拱門、帶木欄杆的陽台,寬大的窗戶和門也顯示出室內既明亮又通風。 別墅周圍是茂密的熱帶植被 (包括高大的棕櫚樹),為整個環境增加了寧靜感和異國情調。
更新的提示 模型輸出
熱帶地區帶游泳池的白色別墅照片。 您是 AI 助理,負責撰寫度假租賃物業的詳細清單。 僅根據影像中可見的內容,以三句話摘要說明所有物業的最理想特色。 總結出一句話,說明客戶應該立即預訂的原因。 這個世外桃源般的別墅展示了一個吸引人的私人游泳池,有一個便於進入的階梯,由鋪有美麗磁磚的日光浴平台和舒適的躺椅所包圍,非常適合用於太陽浴,或在熱帶棕櫚樹的陰影下享受一本好書。 別墅的設計具有明顯的建築魅力,具有優雅的拱門、帶茅草屋頂的涼亭和陽台,可為您帶來寧靜的景色,並提供品嘗早晨或晚間飲料的完美地點。 別墅周圍的茂密植披不僅可提供隱私,而且提升了奢華度假勝地的整體感覺。 別錯過入住完美結合奢華與寧靜的別墅的大好機會,立即預定即可享受無與倫比的熱帶假期!

這些指導方針和範例,示範了量身打造的系統提示如何大幅提升具有視覺功能的 GPT-4 Turbo 效能,確保回應不僅準確,而且非常適合手頭工作中的特定內容。