Kennisoptimalisatie: test en verbeter je bot

Kennisoptimalisatie

Kennisoptimalisatie is de centrale plek om uw chatbot accuraat te houden. In plaats van één losse tool bundelt het vijf tabbladen die elk een ander onderdeel van de antwoordkwaliteit aanpakken, van het genereren van testvragen tot het ontdekken van hiaten uit echte gesprekken met bezoekers, het controleren van uw kennisbank op tegenstrijdigheden, het herschrijven van de rol van de bot en het direct vergelijken van AI-modellen.

Kies bovenaan de pagina een chatbot; die selectie geldt voor elk tabblad. Elk tabblad voert zijn eigen analyse uit en plaatst, waar relevant, verbetersuggesties in de gedeelde Optimalisatie-inbox zodat u ze kunt controleren en toepassen.

De tabbladen in een oogopslag

Tabblad Optimaliseren: hiaten ontdekken uit echte gesprekken

Het tabblad Optimaliseren vindt wat uw bot daadwerkelijk niet kon beantwoorden, op basis van echte bezoekersgeschiedenis in plaats van aannames. Het verzamelt onbeantwoorde en vastgelegde vragen uit het geselecteerde tijdsvenster, groepeert ze per onderwerp en genereert bewerkbare inhoudssuggesties om elk hiaat op te vullen.

Hoe u dit uitvoert:

1. Kies een periode: Laatste 30 dagen of Laatste 90 dagen
2. Klik op Analyseren
3. De tool verzamelt onbeantwoorde vragen, groepeert ze per onderwerp, analyseert elke groep en stelt conceptinhoud op

Elke analyse gebruikt maximaal 10 AI-analyses en verbruikt geen chatberichten. Resultaten verschijnen in de onderstaande Optimalisatie-inbox als Kennishiaat-suggesties. Een suggestie die voortkomt uit meerdere echte vragen toont hoeveel keer dit voorkwam, zodat u de meest voorkomende hiaten als eerste kunt prioriteren.

Als er binnen de gekozen periode geen onbeantwoorde vragen zijn, geeft het tabblad aan dat er op dit moment niets te optimaliseren valt.

Tabblad Audit: problemen in uw kennisbank opsporen

Het tabblad Audit controleert de inhoud die u al hebt, niet wat er ontbreekt. Het scant uw geïndexeerde bronnen op drie problemen en stelt verbeteringen voor:

Hoe u dit uitvoert:

1. Klik op Audit starten
2. De tool scant uw kennisbank en laat een AI-beoordelaar de gevonden verdachte paren controleren
3. De bevindingen verschijnen in een controlelijst waarin u de betreffende fragmenten naast elkaar ziet

Controleer de bevindingen, behoud de items die u wilt aanpakken (elk item heeft een selectievakje) en klik op Opslaan in inbox. Wanneer een automatische herformulering mogelijk is, staat er bij de bevinding Automatische correctie beschikbaar en kunt u de gecorrigeerde tekst direct vanuit de inbox toepassen. Bij gecrawlde of gesynchroniseerde bronnen markeert de suggestie alleen het probleem, u lost het dan op bij de bron zelf. Als er geen problemen zijn gevonden, meldt de audit dat de kennisbank in orde is.

Tabblad Rol: de systeemprompt van de bot afstemmen

Het tabblad Rol verbetert de rol van uw chatbot (de systeemprompt). Het controleert mislukte testvragen en bekende kennishiaten en stelt vervolgens een herschreven rol voor, gericht op betere antwoorden.

Hoe u dit uitvoert:

1. Klik op Verbeterde rol voorstellen
2. Vergelijk de huidige rol en de voorgestelde rol naast elkaar, de voorgestelde tekst is bewerkbaar en een toelichting legt uit wat er veranderd is en waarom
3. Valideer dit met een A/B-test: kies een bron voor de vragen (5 nieuwe testvragen genereren of de vragen van uw laatste testronde hergebruiken) en klik op A/B-test starten
4. Dezelfde vragen worden gesteld met beide rollen, een AI-beoordelaar kiest per vraag het betere antwoord en u ontvangt een winstpercentage inclusief een overzicht per vraag
5. Als de nieuwe rol wint, klikt u op Rol toepassen om deze direct live te zetten

De A/B-test stelt elke vraag twee keer (huidig versus voorgesteld), dus een test met 10 vragen verbruikt ongeveer 20 testberichten van uw maandelijkse limiet. Dit is meer als u een premium model test, aangezien krachtigere modellen als meer dan één bericht tellen. Voor het toepassen van de rol is de machtiging chatbots vereist.

Tabblad Modellenarena: AI-modellen vergelijken

De Modellenarena voert dezelfde set vragen parallel uit op 2–3 AI-modellen en vergelijkt ze op antwoordkwaliteit (beoordeeld door een AI-beoordelaar) en mediane reactietijd. Gebruik dit om te bepalen of een sneller of goedkoper model goed blijft presteren op uw eigen inhoud.

Hoe u dit uitvoert:

1. Selecteer 2–3 modellen om te vergelijken (uw huidige model is gemarkeerd)
2. Kies een bron voor de vragen (nieuwe vragen genereren of de laatste sessie hergebruiken)
3. Klik op Vergelijking starten
4. Bekijk de resultatentabel met het kwaliteitspercentage, de mediane latentie en een aanbeveling voor de beste balans tussen beide
5. Vouw een vraag uit om het daadwerkelijke antwoord van elk model te bekijken
6. Klik bij een model op Gebruiken voor deze bot om hiernaartoe over te schakelen

Dit tabblad gebruikt testberichten (die meetellen voor uw maandelijkse limiet) en voor het toepassen van een model is de machtiging chatbots vereist.

Tabblad Kennistest: test automatisch uw kennisbank

Het tabblad Kennistest is de klassieke Kennistest. Het genereert automatisch realistische testvragen, voert deze uit op uw chatbot, beoordeelt de antwoorden met AI en helpt u eventuele hiaten op te lossen.

Testmodi

Auto Test is het meest geschikt voor een algemene controle van de gezondheid van uw hele kennisbank. Custom Question is ideaal om te controleren of een specifiek onderwerp of recent toegevoegde inhoud correct wordt beantwoord.

Een test uitvoeren

1. Kies de testmodus: Auto Test of Custom Question
2. Stel het aantal vragen in (Auto Test) of varianten (Custom Question)
3. Voor de modus Custom Question: voer uw vraag in
4. Klik op Start Test

Het systeem doorloopt vervolgens automatisch drie stappen:

Beoordelingscriteria

Bij de resultaten Partial en Not Answered legt de AI uit wat er ontbreekt of onjuist is. Gebruik deze aanbevelingen om uw verbeteringen door te voeren.

Resultatendashboard

Nadat een test is voltooid, vatten vier kaarten deze samen: Beantwoord, Partial, Not Answered en een algemene Score (beantwoord ÷ totaal) met een kleurgecodeerde balk:

• Groen (80%+) — uw kennisbank behandelt de geteste onderwerpen goed
• Oranje (50–79%) — enkele hiaten om aan te pakken
• Rood (onder 50%) — aanzienlijke hiaten vereisen aandacht

Elke geteste vraag verschijnt als een resultaatkaart met de vraag, een beoordelingsbadge, het volledige antwoord van de bot, een aanbeveling (voor Partial/Not Answered) en actieknoppen: Fix with AI, Opnieuw proberen en Find Source.

Fix with AI

Fix with AI is de belangrijkste manier om hiaten op te lossen die tijdens het testen zijn gevonden. Het analyseert alle mislukte vragen, zoekt in uw bestaande kennisbank naar context en genereert inhoud om de hiaten op te vullen.

1. Klik op Fix with AI bij een resultaat met Partial of Not Answered (of op het resultatenoverzicht)
2. Het systeem verzamelt alle mislukte vragen en haalt gerelateerde inhoud op uit uw kennisbank
3. AI stelt een concepttekst op die de ontbrekende informatie dekt, waarbij waar mogelijk concrete gegevens uit uw bronnen worden gebruikt
4. Controleer en bewerk het concept; stel optioneel een documentnaam in (indien leeg gelaten, wordt er automatisch een gegenereerd)
5. Klik op Add as Data Source om het op te slaan als een nieuwe tekstgegevensbron

Na het opslaan wordt u gevraagd de oplossing te verifiëren: Retest all failed, Retest first (een snelle controle van een enkele vraag) of Later. De gegenereerde inhoud verschijnt in het tabblad Kennis van uw chatbot, waar deze bewerkbaar blijft.

Find Source

Find Source lokaliseert welke bestaande gegevensbronnen relevant zijn voor een vraag, handig wanneer u liever een bestaande bron bewerkt dan nieuwe inhoud toevoegt.

1. Klik op Find Source op een resultaatkaart
2. Het systeem doorzoekt uw kennisbank met behulp van vectorovereenkomst (met tekstzoekopdracht als terugvaloptie)
3. Er worden maximaal 10 overeenkomsten getoond, elk met bronnaam, type, een relevantiescore en een inhoudsvoorbeeld van 500 tekens

Van daaruit kunt u een tekstbron direct Bewerken of op Open in Dashboard klikken om naar die bron in het tabblad Kennis te gaan.

Opnieuw proberen en geschiedenis

• Opnieuw proberen voert een enkele vraag opnieuw uit en werkt het bijbehorende antwoord, de beoordeling en de totale score direct bij.
• Retest all failed (na Fix with AI) voert elke vraag met de status Partial en Not Answered in één batch opnieuw uit.
• De sectie Test History toont uw laatste 20 testuitvoeringen per chatbot: score, modus, chatbot en datum. Klik op een invoer om de volledige resultaten te heropenen.

Limieten

De Optimalisatie-inbox

De Optimalisatie-inbox bevindt zich onder de tabbladen Optimaliseren en Audit en verzamelt de verbeteringssuggesties van de AI op één plek. Elke suggestie heeft een type, Kennishiaat, Tegenstrijdigheid, Duplicaat, Dunne inhoud of Rolvoorstel, en een status:

• Open — wachtend op uw beslissing
• Geaccepteerd — toegepast op uw chatbot
• Afgewezen — terzijde gelegd (u kunt dit later heropenen)

Klik op een suggestie om de detailweergave te openen. Afhankelijk van het type ziet u de daadwerkelijke vragen achter een hiaat, de getroffen bronfragmenten of een vergelijking tussen huidig en voorgesteld. Waar de suggestie bewerkbare inhoud bevat, kunt u deze aanpassen voordat u deze toepast. Klik op Toevoegen aan kennisbank (of Herschrijving toepassen / Rol toepassen, afhankelijk van het type) om deze toe te passen, of op Afwijzen om deze over te slaan.

Aanbevolen procedures

• Begin met Optimaliseren — echte gesprekken tonen u de hiaten die u daadwerkelijk antwoorden kosten
• Voer Audit uit na grote imports — ontdek tegenstrijdigheden voordat bezoekers erop stuiten
• Gebruik Kennistest ter verificatie — controleer na het toevoegen van inhoud of de bot nu correct antwoordt
• A/B-test rolwijzigingen — voer een nieuwe prompt niet in op basis van een vermoeden; het tabblad Rol bewijst de verbetering
• Probeer Modellenarena voordat u van model wisselt — controleer of een sneller model nog steeds goed antwoord geeft op basis van uw gegevens
• Controleer kruislings met de dashboards Vragen en Analyse — zie de metriek Onbeantwoord dalen naarmate u hiaten dicht