Image support

Cloud Vision Capabilities: Studie-notities

Kernconcepten van Beeldverwerking

• Functionaliteit: Cloud kan beelden analyseren (bijv. objecten tellen, inhoud identificeren, beelden vergelijken).
• Implementatie: Beelden worden verzonden via een 'Image Block' binnen een 'User Message'.
• Beeldbronnen: Een Image Block kan de ruwe beeldgegevens bevatten of een URL naar een online gehost beeld.
• Limieten:
• Maximaal 100 beelden per enkele aanvraag.
• Er gelden beperkingen op de grootte, hoogte en breedte van elk beeld.
• Beelden tellen tokens; de kosten zijn afhankelijk van de pixels (hoogte × breedte).

Prompt Engineering voor Beeldanalyse

• Cruciaal: Simpele prompts leiden vaak tot onjuiste resultaten. Sterke prompting is essentieel voor nauwkeurigheid.
• Technieken voor Verbetering:
• Analyse-stappen geven: Geef Cloud een reeks stappen om te volgen (bijv. Stap 1: identificeer objecten; Stap 2: tel ze; Stap 3: verifieer de telling).
• Voorbeelden geven (One-shot/Multi-shot): Geef een voorbeeld van een beeld en de correcte beschrijving/telling om het model te trainen.
• Toepassingsvoorbeeld: Gebruik satellietbeelden voor complexe taken, zoals het inschatten van brandrisico (detectie van hoofdgebouw, boomdichtheid, toegang voor hulpdiensten).

Samenvatting

• De kwaliteit van de output van Cloud bij beeldverwerking hangt direct af van de complexiteit en de structuur van de prompt.

Takeaways

• Cloud Vision kan beelden analyseren door objecten te tellen, te identificeren en te vergelijken.
• Sterke prompting is cruciaal voor nauwkeurige beeldanalyse; simpele prompts leiden vaak tot onjuiste resultaten.
• Verbeter de output door in de prompt analyse-stappen te geven of voorbeelden te gebruiken (One-shot/Multi-shot).
• Er gelden limieten: maximaal 100 beelden per aanvraag, en de kosten zijn afhankelijk van de pixels (hoogte maal breedte).