fix: degrade to partial results below the grounding floor
This commit is contained in:
parent
0ccc9a5d4e
commit
47cbeac87a
3 changed files with 68 additions and 3 deletions
|
|
@ -164,3 +164,18 @@ Wat ik deed:
|
|||
max_tokens en kon de gestructureerde output afkappen.
|
||||
- Per unresolved kandidaat wordt titel, artiest en status gelogd, zodat
|
||||
zichtbaar is WAT het model verzon in plaats van alleen hoeveel.
|
||||
|
||||
### Eerlijke gedeeltelijke resultaten
|
||||
|
||||
Wat ik deed:
|
||||
|
||||
- Onder de grounding-floor geeft de pipeline nu een warning plus de nummers
|
||||
die wel geverifieerd zijn, in plaats van een lege foutmelding; alleen een
|
||||
volledig lege pool is nog een terminal error.
|
||||
|
||||
Waarom:
|
||||
|
||||
- Vijf goede, geverifieerde nummers zijn een bruikbaar antwoord; een
|
||||
foutmelding die echte resultaten verbergt is dat niet. Bij "verras me
|
||||
met iets nieuws" vragen valt een groot deel van de kandidaten af bij de
|
||||
verificatie, dus juist daar telt dit. Een weg om dit potentieel te voorkomen/verbeteren in de toekomst is het verbeteren van de prompt, of de LLM met behulp van een derde partij API die zonder de Spotify API te overbelasten gebruikt kan worden om echte nummers te vinden.
|
||||
|
|
|
|||
Loading…
Add table
Add a link
Reference in a new issue