Naar de hoofdinhoud

Plan-Do-Check-Act: AI-hallucinaties voorkomen

Gebruik de PDCA-methodologie om nauwkeurigheid te garanderen en AI-fouten te verminderen

L
Geschreven door Lilly
Meer dan 3 maanden geleden bijgewerkt

AI-hallucinaties begrijpen

Wat zijn AI-hallucinaties?

AI-hallucinaties treden op wanneer de AI inhoud genereert die aannemelijk klinkt, maar feitelijk onjuist is, niet wordt ondersteund door brondocumenten of volledig verzonnen is. Dit gebeurt omdat AI-taalmodellen op basis van patronen voorspellen welke tekst erna moet komen, niet omdat ze feiten ‘kennen’.

Voorbeeld van een hallucinatie:

Prompt: “De lucht is...”

AI zou kunnen voorspellen: “blauw” (zonnige dag), ‘grijs’ (bewolkt), “bewolkt” (regenachtig)

Realiteit: Alleen door het werkelijke weer te controleren, kunt u de nauwkeurigheid bevestigen

Waarom hallucinaties voorkomen bij het schrijven van aanbestedingen

  • Op voorspellingen gebaseerd: AI voorspelt plausibele tekst, geen feitelijke waarheid.

  • Contextuele hiaten: AI beschikt mogelijk niet over specifieke informatie over uw organisatie.

  • Overgeneralisatie: AI past algemene patronen toe op specifieke situaties.

  • Zelfvertrouwen zonder kennis: AI presenteert alle outputs met evenveel zelfvertrouwen.

De Plan-Do-Check-Act (PDCA)-methodologie

PDCA is een continue verbeteringscyclus die, wanneer toegepast op AI-ondersteund schrijven, hallucinaties drastisch vermindert en de kwaliteit van de output verbetert.

PLAN: Bepaal wat u nodig hebt

Doelstelling: Geef duidelijke, specifieke instructies met de juiste context

Voorbeeld PLAN Prompt:

​ "Ik heb een implementatieplan van 1500 woorden nodig waarin wordt ingegaan op de aanbestedingseisen op pagina 12-15 van het bijgevoegde document. Het plan moet het volgende bevatten: (1) een gefaseerde aanpak met een tijdschema, (2) kwaliteitscontrolepunten, (3) risicobeperking, (4) communicatiestrategie. Onze unieke aanpak is minimale verstoring door implementatie buiten kantooruren. Gebruik ons bedrijfsprofiel voor feiten over ons team en onze ervaring."

DOEN: Content genereren

Doel: Laat AI initiële content creëren op basis van uw plan.

Proces:

  • Voeg relevante brondocumenten toe.

  • Schakel de context “Project” in voor toegang tot alle projectbestanden.

  • Selecteer de juiste subagenten.

  • Stuur uw goed geplande prompt.

  • Wacht tot AI content genereert.

Belangrijk: Accepteer in dit stadium dat de output fouten kan bevatten. In de volgende fase worden deze opgespoord.

CONTROLEER: Verifieer aan de hand van bronnen

Doel: Controleer de output van AI systematisch op juistheid en volledigheid.

Dit is de meest cruciale stap om hallucinaties te voorkomen!

Stap 1: Vraag AI-zelfverificatie aan

Nadat AI inhoud heeft gegenereerd, vraagt u onmiddellijk om verificatie:

"Controleer het implementatieplan dat u zojuist hebt gemaakt en vergelijk het met het document met aanbestedingseisen en ons bedrijfsprofiel. Controleer of: (1) aan alle aanbestedingseisen is voldaan, (2) Alle feiten over onze organisatie zijn correct, (3) Er worden geen beweringen gedaan zonder ondersteunend bewijs, (4) Er is geen informatie verzonnen of verondersteld, (5) De tijdlijn en toezeggingen zijn realistisch. Lever een gedetailleerd verificatierapport met eventuele gevonden discrepanties."

Waarom dit werkt:

AI kan de output pas controleren nadat deze is gegenereerd, niet ervoor. Door expliciet om verificatie te vragen als een aparte stap, dwingt u de AI om:

De brondocumenten opnieuw te lezen

  • De output te vergelijken met de bronnen

  • Discrepanties te identificeren

  • Niet-onderbouwde beweringen te markeren

  • Verzonnen informatie op te sporen

Stap 2: Controleer het verificatierapport

De AI levert een gestructureerd verificatierapport met daarin:

✅ Vereisten die met succes zijn aangepakt

⚠️ Gebieden die verduidelijking of aanvullende details behoeven

❌ Onnauwkeurigheden of niet-onderbouwde beweringen

📋 Ontbrekende vereisten

Stap 3: Menselijke verificatie

Vertrouw niet uitsluitend op de zelfcontrole van de AI. Voer uw eigen verificatie uit:

  • Controleer belangrijke feiten aan de hand van brondocumenten

  • Verifieer beweringen over uw organisatie

  • Bevestig technische details

  • Zorg ervoor dat toezeggingen realistisch zijn

  • Valideer referenties en voorbeelden

ACT: Corrigeren en verbeteren

Doelstelling: Correcties en verbeteringen aanbrengen op basis van de bevindingen van de verificatie.

Stap 1: Correcties aanvragen

Op basis van het verificatierapport:

"Werk het implementatieplan bij om: (1) de claim over 24/7 ondersteuning te verwijderen (we bieden alleen ondersteuning tijdens kantooruren), (2) de teamgrootte te corrigeren van 15 naar 12 personen, (3) de ontbrekende vereiste over maandelijkse rapportage toe te voegen, (4) de algemene risicobeperking te vervangen door specifieke strategieën uit ons risicobeheerkader."

Stap 2: Correcties verifiëren

Verifieer na de correcties opnieuw:

“Verifieer het bijgewerkte implementatieplan nogmaals aan de hand van bronnen om er zeker van te zijn dat alle correcties correct zijn aangebracht.”

Stap 3: Herhaal totdat het perfect is

Herhaal de CHECK-ACT-cyclus totdat:

  • Aan alle vereisten is voldaan.

  • Alle feiten zijn gecontroleerd.

  • Er geen ongefundeerde beweringen meer zijn.

  • De inhoud nauwkeurig en volledig is.

Praktisch voorbeeld: PDCA in de praktijk

PLAN:

“Schrijf een samenvatting van 500 woorden over ons begrip, onze aanpak, onze ervaring en de voordelen. Gebruik de vereisten uit het aanbestedingsdocument op pagina 3 en ons bedrijfsprofiel.”

DO:

AI genereert een samenvatting.

CHECK:

“Controleer deze samenvatting aan de hand van de aanbestedingseisen en het bedrijfsprofiel. Controleer alle feiten.”

AI-verificatierapport:

✅ Het gedeelte ‘Inzicht’ gaat in op de behoeften van de klant.

❌ Beweert 20 jaar ervaring te hebben (het bedrijfsprofiel vermeldt 15 jaar).

⚠️ Vermeldt ‘bekroonde service’ zonder te specificeren welke prijs.

❌ Vermeldt ‘100% succespercentage’ (niet ondersteund door enig document).

📋 Ontbrekende vereiste sectie over ecologische duurzaamheid.

ACT:

“Correcties: (1) Wijzig in 15 jaar ervaring, (2) Verwijder ‘bekroonde’ of specificeer de daadwerkelijke prijs die we hebben gewonnen, (3) Verwijder de claim ‘100% succespercentage’, (4) Voeg een sectie toe over ecologische duurzaamheid op basis van ons duurzaamheidsbeleidsdocument.”

Controleer opnieuw:

“Controleer de gecorrigeerde samenvatting.”

Resultaat: Nauwkeurige, geverifieerde inhoud die u niet in verlegenheid brengt of diskwalificeert.

Belangrijkste principes

  • AI kan zichzelf niet corrigeren vóór het genereren: de inhoud moet eerst worden gemaakt en vervolgens worden gecontroleerd.

  • Expliciete verzoeken om verificatie zijn essentieel: ga er niet vanuit dat AI automatisch controleert.

  • Meerdere verificatierondes verbeteren de nauwkeurigheid: controleer, corrigeer, controleer opnieuw.

  • Menselijk toezicht is verplicht: AI-verificatie helpt, maar vervangt het menselijk oordeel niet.

  • Brondocumenten zijn de waarheid: controleer altijd aan de hand van daadwerkelijke documenten, niet aan de hand van het geheugen van AI.

  • Veelvoorkomende soorten hallucinaties om op te letten

  • Verzonnen statistieken: “We hebben meer dan 500 projecten voltooid” (controleer het werkelijke aantal).

  • Overdreven beweringen: “Toonaangevend in de branche”, “Beste in zijn klasse” (verifieer of verwijder).

  • Onjuiste datums: voltooiingsdata van projecten, oprichtingsjaar van het bedrijf.

  • Verkeerde teamgroottes: aantal werknemers, teamleden

Niet-ondersteunde mogelijkheden: diensten die u niet daadwerkelijk aanbiedt

Algemene voorbeelden: casestudy's die goed klinken, maar niet echt zijn

Was dit een antwoord op uw vraag?