Exercise on prompting

Studiennotizen: Prompt Engineering zur Datenextraktion

Ziel des Trainings:

• Verbesserung eines bestehenden Prompts, um spezifische Daten aus einem Text zu extrahieren.
• Aufgabe: Extrahieren aller Themen aus einem wissenschaftlichen Textabschnitt.
• Erwartetes Format: JSON-Array von Strings.

Schlüsselkonzepte zur Prompt-Optimierung:

• **1. Einfachheit und Direktheit (Simplicity and Directness):**
• Der Prompt muss extrem klar und unmissverständlich formuliert sein.
• Beispiel: Anstatt vage zu sein, muss die Anweisung präzise lauten: „Extrahiere die Schlüsselthemen aus einem Textabschnitt in ein JSON-Array von Strings. “
• Ergebnis: Führt zu einer sofortigen und signifikanten Verbesserung der Modellgenauigkeit.

• **2. Strukturierung mittels XML-Tags (Delimiters):**
• Verwendung von XML-Tags (z. B. <text>... </text>) um den zu verarbeitenden Inhalt zu umschließen.
• Vorteil: Schafft eine klare Verbindung zwischen der Anweisung und den bereitgestellten Daten, was die Lesbarkeit für das Modell erhöht.

• **3. Schritt-für-Schritt-Anweisungen (Step-by-Step Instructions):**
• Das Modell wird durch eine Liste expliziter Schritte geleitet, die es befolgen soll.
• Beispiel:
• Den bereitgestellten Text sorgfältig untersuchen.
• Jedes erwähnte Thema identifizieren.
• Jedes Thema in ein JSON-Array aufnehmen.
• Nur das JSON-Array als Antwort liefern (keine zusätzlichen Kommentare).
• Vorteil: Erzwingt die Einhaltung strenger Formatierungs- und Ausgabe-Constraints.

• Zusätzliche Techniken:
• One-Shot- oder Multi-Shot-Prompting können zur weiteren Verbesserung der Leistung eingesetzt werden.

Takeaways

• Prompts müssen extrem klar und direkt formuliert sein, um die Modellgenauigkeit signifikant zu verbessern.
• Die Verwendung von XML-Tags (Delimitern) hilft, den zu verarbeitenden Inhalt klar von der Anweisung zu trennen.
• Schritt-für-Schritt-Anweisungen erzwingen die Einhaltung strenger Formatierungs- und Ausgabe-Constraints.
• One-Shot- oder Multi-Shot-Prompting sind zusätzliche Techniken zur Leistungssteigerung.