Prompt engineering

Prompt Engineering & Evaluatie

• Prompt Engineering: Het proces van een bestaande prompt verbeteren om betrouwbaardere en kwalitatief hogere outputs van een model te krijgen.
• Module Structuur: De module volgt een iteratieve cyclus:
• Schrijf een initiële (vaak slechte) prompt.
• Evalueer de prompt (lage score).
• Pas prompt engineering technieken toe.
• Herhaal de evaluatie to zien of de prestaties verbeteren.
• Doel van de Prompt: Het genereren van een dagmenu voor een atleet, gebaseerd op specifieke input (lengte, gewicht, doel, dieetbeperkingen).
• Prompt Evaluator: Een klasse die de datasetgeneratie en de beoordeling door het model (model grading) bundelt.
• Concurrency: De Prompt Evaluator ondersteunt gelijktijdigheid (concurrency) om het evaluatieproces te versnellen door meerdere API-aanroepen tegelijk te doen.
• Dataset Generatie: Vereist het definiëren van het algemene doel van de prompt en de inputspecificaties (bijv. lengte in CM, gewicht in kg).
• Initial Prompt: De eerste, naïeve prompt is vaak

Takeaways

• Prompt Engineering is het proces van een bestaande prompt verbeteren om betrouwbaardere en kwalitatief hogere outputs te krijgen.
• De module volgt een iteratieve cyclus: Schrijf prompt → Evalueer (lage score) → Pas technieken toe → Herhaal evaluatie.
• De Prompt Evaluator bundelt datasetgeneratie en de beoordeling door het model (model grading).
• Concurrency versnelt het evaluatieproces door meerdere API-aanroepen tegelijk uit te voeren.