‘Het tweede antwoord leest beter’ is een eerlijke indruk. Maar daarmee is nog niet gezegd of een skill zijn werk beter doet. Misschien is de nieuwe samenvatting korter en is onderweg juist de enige belangrijke voorwaarde weggevallen. Wie een skill verbetert, heeft daarom een referentiepunt nodig buiten de eigen smaak.
Anthropics skill-creator beschrijft een iteratief traject van concept, taken, evaluatie en herziening. Om te beginnen kun je daar een kleine vergelijking van afleiden. De volgende testopzet en de bijbehorende voorbeeldgegevens zijn onze eigen suggesties; er zijn geen resultaten mee verzameld.
De valse zekerheid van een vlotte samenvatting
Stel je een serviceverzoek voor: ‘Het reserveonderdeel kan worden verzonden zodra er goedkeuring is gegeven.’ Een samenvatting als ‘Reserveonderdeel wordt verzonden’ verliest een voorwaarde. ‘Goedkeuring voor verzending nog in behandeling’ behoudt de beslissende status, ook al klinkt de zin minder vriendelijk.
Bepaal vóór de vergelijking welke fouten voor jouw taak kostbaar zijn. In het voorbeeld zijn dat verzonnen toezeggingen, verloren voorwaarden en onduidelijke verantwoordelijkheden. Lengte en toon zijn aanvullende criteria, maar ze mogen deze feitelijke vragen niet vervangen.
Vijf gevallen in plaats van één favoriet voorbeeld
Maak per geval één klein bestand: een volledig verzoek, een met een verzendvoorwaarde, een met tegenstrijdige data, een zonder verantwoordelijke persoon en een met een irrelevante uitweiding. Schrijf bij elk bestand een referentienotitie. Die beschrijft de vereiste afhandeling, niet één bindende modelformulering.
Case: versand-bedingt
Must be preserved: shipping requires approval.
Must not appear: a claim that the part has already been shipped.
Appropriate gap: who gives the approval?
Style: short, clear working note.Zo'n referentie laat ruimte voor verschillende goede antwoorden. Tegelijk voorkomt ze dat een bijzonder zelfverzekerde formulering de beoordelingsmaatstaf ongemerkt verschuift. Bij betwiste gevallen blijft de oorspronkelijke notitie de gezaghebbende bron.
Dezelfde invoer, herkenbare voorwaarden
Verwerk dezelfde bestanden met en zonder de skill. Houd andere instellingen zo constant mogelijk en noteer wat je niet gelijk kon houden. Label de uitvoer eerst neutraal, bijvoorbeeld variant A en B. Wie ze beoordeelt, mag niet alleen aan de bestandsnaam kunnen zien welk antwoord jouw favoriete concept heeft opgeleverd.
Beoordeel feitelijke juistheid, behoud van voorwaarden, zichtbaarheid van open details en duidelijkheid afzonderlijk. Een eenvoudige schaal volstaat: voldaan, deels voldaan of geschonden. Voeg de doorslaggevende passage toe. De combinatie van oordeel en bewijs is nuttiger dan een getal zonder uitleg.
Ook het geval ‘te veel vervolgvragen’ hoort hierbij. Als een volledige invoer elke keer als onduidelijk wordt behandeld, werkt het proces evenmin goed. Een voorzichtige skill moet ontbrekende beslissingen zichtbaar maken, niet uit voorzorg elk behapbaar stuk werk blokkeren.
Uit één fout een beperkte wijziging afleiden
Als de verzendvoorwaarde verloren gaat, voeg dan precies daarvoor een regel toe: voorwaarden die aan toezeggingen verbonden zijn, moeten in de samenvatting behouden blijven. Vermijd het in dezelfde stap zo mogelijk om de lengte van de uitvoer, de aanspreekvorm en alle voorbeelden te wijzigen. Anders is het moeilijk om het effect van een verbetering toe te schrijven.
Herhaal de bestaande gevallen en voeg een nieuw voorwaardelijk geval uit een andere context toe. Dat kan een terugbetaling zijn die pas plaatsvindt zodra een bon is ontvangen. Als de skill ook deze samenhang behoudt, wijst dat op een bruikbaar geformuleerde regel. Het zou nog geen algemeen bewijs zijn voor alle voorwaarden en onderwerpen.
Wat de vergelijking werkelijk laat zien
Vijf gevallen kunnen een specifiek probleem zichtbaar maken. Ze bewijzen geen algemene superioriteit van een model of een vaste tijdsbesparing. Geautomatiseerde evaluaties kunnen bovendien dezelfde voorwaarde missen als de generatie. Laat belangrijke afwijkingen daarom door een persoon beoordelen aan de hand van de oorspronkelijke passage.
Bewaar invoer, uitvoer, criteria en de wijziging bij elkaar. Dan kun je later uitleggen waarom een regel bestaat en welke observatie die moet ondersteunen. Juist deze navolgbare samenhang maakt een skill onderhoudbaar; een hogere score die je toevallig prettiger vindt, doet dat op zichzelf niet.
Bronnen en documentatiestatus: 25 oktober 2026.
