Sdílet prostřednictvím

Techniky přípravy výzvy k obrázkům

  • Článek

Pro odemknutí plného potenciálu GPT-4 Turbo s vision je nezbytné přizpůsobit výzvy vašim konkrétním potřebám. Tady je několik pokynů pro zvýšení přesnosti a efektivity výzev.

Základy vytváření výzvy k zadání obrázku

  • Kontextová specificita: Přidání kontextu do scénáře v ruce dává modelu lepší přehled o vhodném výstupu. Tato úroveň specifikity pomáhá zaměřit se na relevantní aspekty a vyhnout se nadbytečným podrobnostem.

  • Výzvy orientované na úlohy: Zaměření na konkrétní úlohu pomáhá modelu při vývoji výstupu při zohlednění této perspektivy.

  • Zpracování odmítnutí: Když model indikuje neschopnost provést úlohu, může být upřesnění výzvy efektivním řešením. Konkrétnější výzvy můžou model vést k jasnějšímu porozumění a lepšímu provádění úlohy. Některé tipy, které je potřeba mít na paměti:

    • Vysvětlení žádostí o vygenerované odpovědi za účelem zvýšení transparentnosti ve výstupu modelu
    • Pokud používáte výzvu s jedním obrázkem, umístěte ho před text.
    • Požádejte model, aby nejprve popsal obrázek v podrobnostech a dokončil konkrétní úlohu z popisu.

  • Přidání příkladů: Přidání příkladů představujících typ odpovědí, které hledáte

  • Rozdělení požadavků: Zkuste podrobné rozdělení složitých požadavků a vytvořte spravovatelné dílčí cíle.

  • Definujte výstupní formát: Jasně uveďte požadovaný formát výstupu, například markdown, JSON, HTML atd. Můžete také navrhnout konkrétní strukturu, délku nebo konkrétní atributy týkající se odpovědi.

Příklad vstupů výzvy a výstupů

Existuje mnoho způsobů, jak vytvořit systémové výzvy k přizpůsobení výstupu speciálně vašim potřebám. Následující ukázkové vstupy a výstupy ukazují, jak můžete upravit výzvy, abyste získali různé výsledky. Vyzkoušejte si model sami pro sebe pomocí těchto obrázků a upravte výzvu systému v dětském prostředí Azure AI Studio.

Kontextová specifika

Kontext může pomoct vylepšit zpětnou vazbu z modelu. Pokud například pracujete na popisech obrázků pro katalog produktů, ujistěte se, že se v této výzvě zobrazuje jasný a stručný způsob. Výzva jako "Popsat obrázky pro venkovní pěší turistiku katalog produktů se zaměřením na nadšení a profesionálnost" vede model k vygenerování odpovědí, které jsou přesné i kontextově bohaté.

Základní výzva Výstup modelu
Fotografie kempování stanu a židlí v lese Co je na tomto obrázku? Obrázek znázorňuje nastavení kempu v doménové oblasti. K dispozici je žlutý stan, dvě skládací kempovací židle – jedna červená a jedna modrá – a přenosný kempovací stůl. Okolní oblast je hustě naplněná stromy, což značí, že kemp je v lesnaté oblasti.
Aktualizace výzvy Výstup modelu
Fotografie kempování stanu a židlí v lese Popsat obrázky pro venkovní pěší turistiku katalog produktů se zaměřením na nadšení a professionalismus. "Vydejte se na další venkovní dobrodružství s našimi prémiovými turistickými a kempovacími základy! Zde je náš živý, prostorný stan, navržený tak, aby byl vaším domovem od domova uprostřed klidu přírody. Vyrobeno s top-notch materiály, to slibuje stálost a pohodlí v jakémkoli počasí. Doplňkem stanu jsou naše ultra pohodlné, lehké skládací židle, které jsou k dispozici v poutavý červené a klidné modré, ideální pro tyto okamžiky odpočinku po dni průzkumu. Nezapomeňte na náš robustní, přenosný stůl, ideální pro nádherné venkovní jídlo nebo hru karet pod hvězdami. Zvyšte své zkušenosti s kempováním díky našim spolehlivým produktům, kde kvalita splňuje skvělé venkovní prostředí!"

Výzvy orientované na úlohy

Poskytnutí konkrétního úkolu modelu je jedním ze způsobů, jak zostřit odpověď. V tomto příkladu tento model vyzve k tomu, aby se zaměřil na prvky zásadní pro posouzení pojištění, což zlepšuje přesnost a levnost.

Základní výzva Výstup modelu
Fotografie auta narazila do pólu. Co je na tomto obrázku? Na obrázku je stříbrný sedan, který byl v nehodě. Přední konec auta je poškozen, s kapucí zmačkanou a nárazem je částečně odpojen. Auto se nachází proti sloupu na chodníku, a tam je viditelný kouř pocházející z oblasti motoru, což značí nedávné havárie. Zdá se, že toto nastavení je obytná ulice, jak ukazuje přítomnost domů na pozadí, úhledně oříznutý plot a chodník.
Aktualizace výzvy Výstup modelu
Fotografie auta narazila do pólu. Analyzujte toto video o poškození auta pro sestavu automatického pojištění a zaměřte se na identifikaci a podrobnosti o škodách. Na poskytnutém obrázku vidíme stříbro sedan, které utrpělo značné poškození front-endu. Kapuce vozidla je obzvláště zmačkaná a přední nárazník utrpěl značnou deformaci, částečně odpojenou od skříně. Správná montáž světlometu se zdá být poškozena nebo uvolněna. K dispozici je také viditelné poškození přední mřížky. Auto je v kontaktu s pomocným pólem, což naznačuje čelní kolize s pólem v relativně nízké nebo střední rychlosti. Kouř pochází z prostoru motoru a naznačuje potenciální mechanické nebo elektrické poškození, které může vyžadovat další kontrolu komplexního posouzení. Zdá se, že na tomto obrázku nejsou nasazené airbagy. Vozidlo bude vyžadovat podrobnou prohlídku, která vyhodnotí úplný rozsah konstrukčních a mechanických škod za úplnou zprávu o pojištění.

Zpracování zamítnutí

Když obdržíte výstup odmítnutí z modelu, existuje několik způsobů, jak upravit vstup, aby se vygenerovala vhodnější odpověď. Níže je jedním z příkladů, jak zvládnout odmítnutí a pokrok.

Základní výzva Výstup modelu
Fotografie jídelního stolu s několika talíři jídla Naplánovat toto jídlo Omlouvám se, ale nemůžu poskytnout tyhle informace.
Zpracovat výzvu Výstup modelu
Jaké informace potřebujete? Omlouvám se za nejasnosti dříve. K naplánování jídla na základě poskytnutého obrázku bych potřeboval znát následující:
Početlidích
Jakákoli dietní omezení nebo předvolby pro ubytování (např. vegetariánská, bezlepková, alergie).
Příležitost nebo typ jídla, které se plánuje (např. neformální oběd, večeře).
Požadovaný zůstatek jídla z hlediska skupin potravin a výživy.
S touto informací bych mohl pomoci navrhnout, jak porce jídla, vytvořit vyvážené jídlo a zajistit, aby jídlo splňovalo potřeby všech restaurací.

Přidání příkladů

Základní výzva Výstup modelu
Fotografie hraničního kolie psa, který leží v trávě. Co je toto psí plemeno a co je jeho průměrná hmotnost a výška? Zdá se, že pes na obrázku je border Collie. Border Collies jsou známé pro jejich inteligenci, flexibilitu a schopnosti herdingu. Průměrná hmotnost border Collie je obvykle kolem 30-45 liber (14-20 kg). Pokud jde o výšku, Border Collies obecně stojí asi 18-22 palců (46-56 centimetrů) na rameni. Tyto údaje se mohou lišit v závislosti na genetice jednotlivých psů, dietě a úrovni aktivity. Border Collies jsou středně velké psy s dobře proporcionovaným tělem a vysokou úrovní energie.
Aktualizace výzvy Výstup modelu
Otázka: Co je toto psí plemeno a co je jeho průměrná hmotnost a výška? Fotografie pomeranského psa sedícího na bazénu potápěčské desky nad vodou.
A: Plemena: pomeranian; průměrná hmotnost: 3-7 lbs; průměrná výška: 8-14 palců
Fotografie buldogu, který leží v trávě. A: Plemeno: Anglický buldog; průměrná hmotnost: 50-55 lbs; průměrná výška: 14-16 palců Fotografie hraničního kolie psa, který leží v trávě. 		A: Plemena: Border Collie; průměrná hmotnost: 30-45 lbs; průměrná výška: 18-22 palců

Rozdělení požadavků

Základní výzva Výstup modelu
Fotografie karty receptu s podrobnostmi o receptu na babičina jablko drobek koláč. Co je na tomto obrázku? Obrázek obsahuje kartu receptu s názvem Babička's Apple Crumb Pie. Je poznamenáno jako tradice díkůvzdání. Uvedené složky jsou:
  • 5-7 jablek, oloupané
  • 1 9palcová výsečová kůra
  • 3/4 šálky cukru
  • 1/2 lžičky čajové lžičky
  • Pomlčka soli
  • 3 polévkové lžíce másla

Upozorňujeme, že měření cukru, mouky a másla nejsou na obrázku plně viditelné. V případě potřeby standardní opatření pro zastavení drobky obvykle zahrnují kombinaci cukru, mouky a másla smíšeného dohromady, dokud se nedrolí
Aktualizace výzvy Výstup modelu
Fotografie karty receptu s podrobnostmi o receptu na babičina jablko drobek koláč. Jste asistent umělé inteligence, který pomáhá vytvářet nákupní seznamy a pokyny k přípravě potravin na základě receptů. Uveďte seznam složek, které si chcete koupit, a pak uveďte seznam pokynů pro přípravu ingrediencí na základě karty receptu. Jistě, tady je nákupní seznam založený na kartě receptu:
Nákupní seznam:
  1. 5-7 jablek (vhodné pro pečení, jako je Babička Smith nebo Honeycrisp)
  2. 1 připravená koláčová kůra (9 palců)
  3. Cukr (ujistěte se, že máte dost na 1/2 cup)
  4. All-purpose mouka (ujistěte se, že máte dost na 3/4 šálky)
  5. Uzemněná citronová
  6. Náhodný řetězec
  7. Máslo (ujistěte se, že máte dost na 3 polévkové lžíce)

Pokyny pro předběžné provedení:
  • Oloupejte jablka: Pomocí zeleninového peelingu nebo paringového nože odstraňte kůži z 5 na 7 jablek.
  • Jádro a řez jablek: V závislosti na tom, co dáváte přednost výsečové texturě, vyjměte jablka a pak rozkrájejte jablka na tenké řezy nebo bloky.
  • Změřte složky: Změřte 3/4 šálky cukru, 1/2 lžičky sladky, pomlčku soli (asi 1/8 lžičky) a 3 lžičky másla.
  • Připravte máslo: Nakrájíme máslo na malé kousky, které budou připravené k použití v receptu. Pokud je chladná, je často jednodušší ho začlenit, takže ho udržujte v chlazení, dokud nebude potřeba.
  • Předehřejte troubu podle pokynů koláče, aby bylo připravené k pečení po sestavení koláče.
  • Nezapomeňte postupovat podle jakýchkoli dalších pokynů k přípravě nebo pečení, které jsou uvedeny v plném receptu na koláč jablečného drobku.

Definování výstupního formátu

Základní výzva Výstup modelu
Fotografie bílé vily v tropické oblasti s bazénem. Popište tento obrázek. Na obrázku je luxusní bílá vila s tradiční střechou na jedné části a čistý modrý bazén v popředí. K dispozici jsou lehátka lemovaná podél bazénu, zvoucí odpočinek. Architektura zahrnuje elegantní oblouky, balkon s dřevěnými zábradlími a velká okna a dveře, které navrhují světlý a vzduchový interiér. Vila je obklopena svěžím tropickým porostem, včetně vysoké palmy, která přidává do klidné a exotické atmosféry nastavení.
Aktualizace výzvy Výstup modelu
Fotografie bílé vily v tropické oblasti s bazénem. Jste asistent umělé inteligence, který píše podrobné výpisy pro ubytování v soukromí. Shrnout ve třech větách optimální funkce výpisu na základě toho, co je vidět na obrázku. Závěr s jednou větou o tom, proč by si zákazník měl rezervovat dnes. Tato idylická vila představuje pozvaný soukromý bazén s kroky pro snadný přístup, rámovaný krásně dlážděnou sluneční terasou a pohodlnými lehátky ideální pro namáčení slunce nebo vychutnat si dobrou knihu pod stínem tropických palm. Architektonické kouzlo je zřejmé v návrhu vily s elegantními oblouky, střecha-střechový altán a balkony, které slibují klidné výhledy a perfektní místo, kde si můžete vychutnat ranní nebo večerní nápoje. Svěží zeleně obklopující nemovitost nejen poskytuje soukromí, ale také zlepšuje smysl exkluzivního ráje retreat. Nenechte si ujít příležitost zabezpečit tuto dokonalou kombinaci luxusních a klidných míst – zarezervujte si dnes pro tropické útěky jako žádný jiný!

Tyto pokyny a příklady ukazují, jak přizpůsobené systémové výzvy mohou výrazně zvýšit výkon GPT-4 Turbo s obrazem, což zajišťuje, že odpovědi jsou nejen přesné, ale také dokonale vhodné pro konkrétní kontext daného úkolu.