Freigeben über

Bildprompt-Engineering-Techniken

  • Artikel

Um das volle Potenzial von GPT-4 Turbo mit Vision zu erschließen, ist es wichtig, die Prompts an Ihre spezifischen Anforderungen anzupassen. Hier sind einige Richtlinien, um die Genauigkeit und Effizienz Ihrer Prompts zu verbessern.

Grundlagen der Erstellung Ihres Bildprompts

  • Kontextspezifität: Durch das Hinzufügen von Kontext zum jeweiligen Szenario erhält das Modell ein besseres Verständnis für eine angemessene Ausgabe. Dieser Grad an Spezifität hilft, sich auf relevante Aspekte zu konzentrieren und überflüssige Details zu vermeiden.

  • Aufgabenorientierte Prompts: Die Konzentration auf eine bestimmte Aufgabe hilft dem Modell, die Ausgabe unter Berücksichtigung dieser Perspektive zu entwickeln.

  • Umgang mit Ablehnungen: Wenn das Modell anzeigt, dass eine Aufgabe nicht ausgeführt werden kann, es eine effektive Lösung sein, den Prompt zu verfeinern. Spezifischere Prompts können das Modell auf ein klareres Verständnis und eine bessere Ausführung der Aufgabe lenken. Einige Tipps, die Sie beachten sollten:

    • Anfordern von Erklärungen für generierte Antworten zur Verbesserung der Transparenz in der Modellausgabe
    • Wenn Sie einen Prompt mit einem Bild verwenden, platzieren Sie das Bild vor dem Text.
    • Fordern Sie das Modell auf, das Bild zuerst detailliert zu beschreiben und Ihre spezifische Aufgabe anhand der Beschreibung abzuschließen.

  • Hinzufügen von Beispielen: Fügen Sie Beispiele hinzu, die den Typ der Antworten darstellen, nach denen Sie suchen.

  • Aufteilen von Anforderungen: Versuchen Sie, komplexe Anforderungen schrittweise aufzugliedern, um überschaubare Teilziele zu schaffen.

  • Definieren des Ausgabeformats: Geben Sie das gewünschte Format für die Ausgabe eindeutig an, z. B. Markdown, JSON, HTML usw. Sie können auch eine bestimmte Struktur, eine bestimmte Struktur, Länge oder bestimmte Eigenschaften der Antwort vorschlagen.

Beispiel für Eingaben und Ausgaben von Prompts

Es gibt viele Möglichkeiten, System-Prompts so zu gestalten, dass die Ausgabe speziell auf Ihre Bedürfnisse zugeschnitten ist. Die folgenden Beispieleingaben und -ausgaben zeigen, wie Sie ihre Prompts anpassen können, um unterschiedliche Ergebnisse zu erzielen. Probieren Sie das Modell selbst unter Verwendung dieser Bilder aus, und passen Sie den System-Prompt im Azure KI Studio-Playground an.

Kontextspezifität

Kontext kann dazu beitragen, Feedback aus dem Modell zu verbessern. Wenn Sie z. B. an Bildbeschreibungen für einen Produktkatalog arbeiten, stellen Sie sicher, dass Ihr Prompt dies klar und präzise widerspiegelt. Ein Prompt wie „Bilder für einen Produktkatalog für Outdoor-Wanderungen mit Schwerpunkt auf Enthusiasmus und Professionalität beschreiben“ leitet das Modell dazu an, Antworten zu generieren, die sowohl genau als auch kontextbezogen sind.

Einfacher Prompt Modellausgabe
Foto eines Campingzeltes und Stühlen in einem Wald. Was ist auf diesem Bild zu sehen? Das Bild zeigt eine Campingeinrichtung in einem Waldgebiet. Zu sehen sind ein gelbes Zelt, zwei faltbare Campingstühle – ein roter und ein blauer – und ein tragbarer Campingtisch. Die Umgebung ist dicht mit Bäumen bewachsen, was darauf hindeutet, dass der Campingplatz in einer bewaldeten Region liegt.
Aktualisierter Prompt Modellausgabe
Foto eines Campingzeltes und Stühlen in einem Wald. Beschreibe Bilder für einen Produktkatalog für Outdoor-Wanderungen mit Schwerpunkt auf Enthusiasmus und Professionalität. „Starten Sie Ihr nächstes Outdoor-Abenteuer mit unseren hochwertigen Wander- und Campingartikeln! Hier sehen Sie unser farbenfrohes, geräumiges Zelt, das Sie inmitten der Ruhe der Natur zu Ihrem Zuhause machen wird. Es ist aus erstklassigen Materialien gefertigt und verspricht Langlebigkeit und Komfort bei jedem Wetter. Ergänzend zum Zelt bieten wir ultrabequeme, leichte Klappstühle in den auffälligen Farben Rot und Blau an – perfekt für entspannte Momente nach einem Tag voller Entdeckungen. Vergessen Sie nicht unseren stabilen, tragbaren Tisch, ideal für ein köstliches Essen im Freien oder ein Kartenspiel unter dem Sternenhimmel. Verbessern Sie Ihr Campingerlebnis mit unseren zuverlässigen Produkten, bei denen Qualität auf die tolle Natur trifft!“

Aufgabenorientierte Prompts

Eine Möglichkeit, die Antwort zu schärfen, besteht darin, dem Modell eine bestimmte Aufgabe zu stellen. In diesem Beispiel steuert dieser Prompt das Modell so, dass es sich auf Elemente konzentriert, die für die Bewertung von Versicherungen entscheidend sind, und so die Genauigkeit und Relevanz verbessert.

Einfacher Prompt Modellausgabe
Foto eines an einem Mast verunfallten Autos. Was ist auf diesem Bild zu sehen? Das Bild zeigt eine silberne Limousine, die einen Unfall hatte. Die Frontpartie des Wagens ist beschädigt, die Motorhaube ist zerdrückt, und der Stoßfänger ist teilweise abgetrennt. Das Auto steht gegen an einem Strommasten auf dem Bürgersteig, und aus dem Motorbereich kommt sichtbarer Rauch, was auf einen kürzlichen Unfall hinweist. Die Umgebung scheint eine Wohnstraße zu sein, wie die Häuser im Hintergrund, eine ordentlich geschnittene Hecke und ein Gehweg zeigen.
Aktualisierter Prompt Modellausgabe
Foto eines an einem Mast verunfallten Autos. Analysiere dieses Autoschadensvideo für einen Kfz-Versicherungsbericht, der sich auf die Identifizierung und Detailierung von Schäden konzentriert. In dem bereitgestellten Bild sehen wir eine silberne Limousine mit erheblichen Schäden an der Frontpartie. Die Motorhaube des Fahrzeugs ist stark zerdrückt, und der vordere Stoßfänger ist stark verformt und hat sich teilweise vom Fahrgestell gelöst. Die rechte Scheinwerfereinheit scheint beschädigt oder verrutscht zu sein. Auch im Bereich des vorderen Kühlergrills sind Schäden sichtbar. Das Fahrzeug berührt einen Strommasten, was auf einen Frontalzusammenstoß mit dem Mast bei relativ geringer oder mäßiger Geschwindigkeit schließen lässt. Aus dem Motorraum tritt Rauch aus, was auf einen möglichen mechanischen oder elektrischen Schaden hinweist, der für eine umfassende Bewertung weiter untersucht werden muss. Die Airbags scheinen auf diesem Bild nicht ausgelöst zu sein. Das Fahrzeug bedarf einer detaillierten Inspektion, um den vollen Umfang der strukturellen und mechanischen Schäden für einen vollständigen Versicherungsbericht zu bewerten.

Umgang mit Ablehnungen

Wenn Sie eine ablehnende Ausgabe von einem Modell erhalten, gibt es mehrere Möglichkeiten, die Eingabe zu optimieren, um eine angemessenere Reaktion zu generieren. Im Folgenden finden Sie ein Beispiel dafür, wie Sie mit einer Ablehnung umgehen und wie Sie vorankommen.

Einfacher Prompt Modellausgabe
Foto eines Esstischs mit mehreren mit Essen gefüllten Tellern. Diese Mahlzeit planen Leider kann ich diese Informationen nicht liefern.
Folge-Prompt Modellausgabe
Welche Informationen werden benötigt? Ich entschuldige mich für die Verwirrung vorhin. Um eine Mahlzeit anhand des bereitgestellten Bildes planen zu können, müsste ich Folgendes wissen:
Die Anzahl der Personen, die zum Essen kommen, um sicherzustellen, dass genug Essen für alle da ist.
Etwaige Ernährungseinschränkungen oder -vorlieben (z. B. vegetarisch, glutenfrei, Allergien).
Der Anlass oder die Art der geplanten Mahlzeit (z. B. einfaches Mittagessen, Dinner Party).
Gewünschte Ausgewogenheit der Mahlzeit in Bezug auf die Lebensmittelgruppen und den Nährwert.
Mit diesen Informationen konnte ich Vorschläge für die Portionierung der Gerichte machen, eine ausgewogene Mahlzeit zusammenstellen und sicherstellen, dass das Essen den Bedürfnissen aller Gäste entspricht.

Hinzufügen von Beispielen

Einfacher Prompt Modellausgabe
Foto eines Border Collies, der auf einer Rasenfläche liegt. Was ist das für eine Hunderasse und wie hoch ist ihr Durchschnittsgewicht und ihre Durchschnittsgröße? Der Hund im Bild scheint ein Border Collie zu sein. Border Collies sind bekannt für ihre bekannt für ihre Intelligenz, ihre Beweglichkeit und ihre Hütefähigkeiten. Das Durchschnittsgewicht eines Border Collies liegt in der Regel bei 30-45 Pfund (14-20 Kilogramm). Was die Größe betrifft, haben Border Collies in der Regel eine Schulterhöhe von etwa 18-22 Zoll (46-56 Zentimeter). Diese Zahlen können je nach Genetik, Ernährung und Aktivität des einzelnen Hundes variieren. Border Collies sind mittelgroße Hunde mit einem wohlproportionierten Körper und einem hohen Maß an Energie.
Aktualisierter Prompt Modellausgabe
F: Was ist das für eine Hunderasse und was ist ihr durchschnittliches Gewicht und die durchschnittliche Schulterhöhe? Foto eines Zwergspitzes, der auf dem Sprungbrett eines Pools über dem Wasser sitzt.
A: Rasse: Spitz; durchschnittliches Gewicht: 3-7 lbs, durchschnittliche Schulterhöhe: 8-14 Zoll
Foto einer Bulldogge, die auf einer Rasenfläche liegt. A: Rasse: Englische Bulldogge, durchschnittliches Gewicht: 50-55 lbs, durchschnittliche Schulterhöhe: 14-16 Zoll Foto eines Border Collies, der auf einer Rasenfläche liegt. 		A: Rasse: Border Collie, durchschnittliches Gewicht: 30-45 lbs, durchschnittliche Schulterhöhe: 18-22 Zoll

Aufschlüsseln der Anforderungen

Einfacher Prompt Modellausgabe
Foto einer Rezeptkarte, auf der ein Rezept für Großmutters Apfelstreuselkuchen beschrieben wird. Was ist auf diesem Bild zu sehen? Das Bild enthält eine Rezeptkarte mit dem Titel „Grandma's Apple Crumb Pie“. Das ist eine Thanksgiving-Tradition. Die aufgeführten Zutaten sind:
  • 5-7 Äpfel, geschält
  • 1 Fertigteig für einen 9-Zoll-Tortenboden
  • 3/4 Tasse Zucker
  • 1/2 Teelöffel Zimt
  • Eine Prise Salz
  • 3 Esslöffel Butter

Bitte beachten Sie, dass die Mengenangaben für Zucker, Mehl und Butter im Bild nicht vollständig sichtbar sind. Falls erforderlich, bestehen die Standardzutaten für Streusel in der Regel aus einer Kombination von Zucker, Mehl und Butter, die so lange gemischt werden, bis sie krümelig sind.
Aktualisierter Prompt Modellausgabe
Foto einer Rezeptkarte, auf der ein Rezept für Großmutters Apfelstreuselkuchen beschrieben wird. Sie sind ein KI-Assistent, der bei der Erstellung von Einkaufslisten und Anweisungen zur Zubereitung von Speisen auf der Grundlage von Rezepten hilft. Bitte geben Sie eine Liste der zu kaufenden Zutaten an, und fügen Sie dann eine Liste mit Anweisungen zur Zubereitung der Zutaten auf der Grundlage der Rezeptkarte bei. Gern, hier ist eine Einkaufsliste, die auf der Rezeptkarte basiert:
Einkaufsliste:
  1. 5-7 Äpfel (zum Backen geeignet, wie Granny Smith oder Honeycrisp)
  2. 1 fertiger Tortenboden (9 Zoll)
  3. Zucker (stellen Sie sicher, dass Sie genug für 1/2 Tasse haben)
  4. Mehl (stellen Sie sicher, dass Sie genug für 3/4 Tasse haben)
  5. Gemahlener Zimt
  6. Salz
  7. Butter (stellen Sie sicher, dass Sie genug für 3 Esslöffel haben)

Zubereitungsanweisungen:
  • Die Äpfel schälen: Schälen Sie 5 bis 7 Äpfel einem Gemüseschäler oder einem Pariermesser.
  • Äpfel entkernen und in Scheiben schneiden: Schneiden Sie die Äpfel in Viertel, entfernen Sie das Kerngehäuse, und schneiden Sie dann die Apfelviertel in dünne Scheiben oder Stücke, je nachdem, welche Konsistenz der Kuchen haben soll.
  • Zutaten abmessen: Messen Sie 3/4 Tasse Zucker, 1/2 Teelöffel Zimt, eine Prise Salz (ca. 1/8 Teelöffel) und 3 Esslöffel Butter ab.
  • Butter vorbereiten: Schneiden Sie die Butter in kleine Stücke, damit sie für das Rezept verwendet werden kann. Sie ist oft leichter zu verarbeiten, wenn sie kalt ist, also bewahren Sie sie im Kühlschrank auf, bis sie gebraucht wird.
  • Heizen Sie den Ofen gemäß den Anweisungen des Kuchenrezepts vor, damit er backbereit ist, sobald der Kuchen in der Form ist.
  • Denken Sie daran, alle zusätzlichen Zubereitungs- oder Backanweisungen zu befolgen, die im vollständigen Rezept für den Apple Crumb Pie angegeben sind.

Ausgabeformat definieren

Einfacher Prompt Modellausgabe
Foto einer weißen Villa mit einem Pool in einer tropischen Region. Dieses Bild beschreiben Das Bild zeigt eine luxuriöse weiße Villa mit einem traditionellen Strohdach auf einem Abschnitt und einem klaren blauen Swimmingpool im Vordergrund. Entlang des Pools stehen Liegestühle bereit, die zum Entspannen einladen. Die Architektur umfasst elegante Torbögen, einen Balkon mit Holzgeländer sowie große Fenster und Türen, die auf ein helles und luftiges Interieur schließen lassen. Die Villa ist von üppiger tropischer Vegetation umgeben, darunter auch hohe Palmen, die zu dem ruhigen und exotischen Ambiente der Umgebung beitragen.
Aktualisierter Prompt Modellausgabe
Foto einer weißen Villa mit einem Pool in einer tropischen Region. Sie sind ein KI-Assistent, der detaillierte Inserate für Ferienwohnungen schreibt. Fassen Sie in drei Sätzen die optimalen Merkmale des Angebots zusammen, und zwar nur auf der Grundlage dessen, was auf dem Bild zu sehen ist. Schließen Sie mit einem Satz darüber ab, warum der Kunde noch heute buchen sollte. Diese idyllische Villa verfügt über einen einladenden Privatpool, der über eine Treppe leicht zu erreichen ist und von einer wunderschön gefliesten Sonnenterrasse mit bequemen Liegen umrahmt wird, die ideal sind, um die Sonne zu genießen oder ein gutes Buch im Schatten der tropischen Palmen zu lesen. Der architektonische Charme der Villa zeigt sich in den eleganten Torbögen, dem strohgedeckten Pavillon und den Balkonen, die einen ruhigen Ausblick und einen perfekten Platz für Ihre morgendlichen oder abendlichen Drinks versprechen. Das üppige Grün, welches das Grundstück umgibt, bietet nicht nur Privatsphäre, sondern verstärkt auch das Gefühl eines exklusiven paradiesischen Rückzugsortes. Verpassen Sie nicht die Gelegenheit, sich diese perfekte Mischung aus Luxus und Ruhe zu sichern – buchen Sie noch heute, und erleben Sie einen unvergesslichen tropischen Urlaub!

Diese Richtlinien und Beispiele veranschaulichen, wie maßgeschneiderte System-Prompts die Leistung von GPT-4 Turbo mit Vision erheblich verbessern können, um sicherzustellen, dass die Antworten nicht nur genau, sondern auch perfekt für den spezifischen Kontext der betreffenden Aufgabe geeignet sind.