Ottimizzatore delle conoscenze: prova e migliora il tuo bot
Ottimizzatore delle conoscenze
L'Ottimizzatore delle conoscenze è l'hub per mantenere accurato il tuo chatbot. Invece di un solo strumento, raggruppa cinque schede che affrontano ciascuna una parte diversa della qualità delle risposte, dalla generazione di domande di test all'estrazione delle lacune dalle conversazioni reali dei visitatori, all'audit della base di conoscenza per individuare contraddizioni, alla riscrittura del ruolo del bot e al confronto diretto tra modelli IA.
Scegli un chatbot nella parte superiore della pagina; tale selezione è condivisa tra tutte le schede. Ogni scheda esegue la propria analisi e, dove opportuno, inserisce suggerimenti di miglioramento nella Inbox di ottimizzazione condivisa, consentendoti di esaminarli e applicarli.
Panoramica delle schede
| Scheda | Cosa fa | Incide sulla quota |
|---|---|---|
| Test delle conoscenze | Genera automaticamente domande di test, le esegue sul bot e valuta le risposte tramite IA. | Sì (messaggi di chat) |
| Ottimizza | Estrae le lacune di conoscenza dalle conversazioni reali passate e dalle domande senza risposta. | No |
| Ruolo | Propone un prompt di sistema migliorato e lo convalida con un test A/B. | Solo test A/B |
| Arena dei modelli | Esegue le stesse domande su 2–3 modelli IA e confronta qualità e velocità. | Sì (messaggi di chat) |
| Audit | Scansiona la base di conoscenza alla ricerca di duplicati, contraddizioni e contenuti scarsi. | No |
Scheda Ottimizza: estrai lacune dalle conversazioni reali
La scheda Ottimizza trova ciò a cui il tuo bot non è realmente riuscito a rispondere, utilizzando la cronologia reale dei visitatori anziché semplici ipotesi. Recupera le domande senza risposta e raccolte nell'intervallo temporale selezionato, le raggruppa per argomento e genera suggerimenti di contenuto modificabili per colmare ciascuna lacuna.
Come eseguirla:
- Scegli un intervallo: Ultimi 30 giorni o Ultimi 90 giorni
- Fai clic su Analizza
- Lo strumento raccoglie le domande senza risposta, le raggruppa per argomento, quindi analizza ciascun gruppo e prepara una bozza dei contenuti
Ogni esecuzione utilizza fino a 10 analisi IA e non consuma messaggi di chat. I risultati vengono inseriti nella Inbox di ottimizzazione sottostante come suggerimenti di tipo Lacuna di conoscenza. Un suggerimento derivato da più domande reali mostra il numero di occorrenze rappresentate, consentendoti di dare priorità alle lacune più frequenti.
Se l'intervallo selezionato non contiene domande senza risposta, la scheda segnala che non c'è nulla da ottimizzare al momento.
Scheda Audit: trova problemi nella tua base di conoscenza
La scheda Audit controlla i contenuti già presenti, non quelli mancanti. Scansiona le origini indicizzate alla ricerca di tre problemi e propone le relative correzioni:
| Riscontro | Perché è importante |
|---|---|
| Contraddizione | Due origini affermano cose diverse: il bot potrebbe rispondere alla stessa domanda in modo differente ogni volta. Questo è il caso più critico. |
| Duplicato | Frammenti quasi identici che aggiungono rumore senza aggiungere informazioni. |
| Contenuto scarso | Un'origine con un numero insufficiente di caratteri per generare risposte utili. |
Come eseguirla:
- Fai clic su Avvia audit
- Lo strumento scansiona la base di conoscenza, quindi richiede a un giudice IA di verificare le coppie sospette individuate
- I riscontri compaiono in un elenco di revisione con i passaggi interessati affiancati
Esamina i riscontri, mantieni quelli su cui vale la pena intervenire (ciascuno ha una casella di controllo) e fai clic su Salva nella inbox. Quando è possibile una riscrittura automatica, il riscontro è contrassegnato con Correzione automatica disponibile e puoi applicare il testo corretto direttamente dalla inbox. Per le origini scansionate o sincronizzate, il suggerimento segnala solo il problema: la correzione va effettuata all'origine. Se non vengono rilevati problemi, l'audit segnala che la base di conoscenza è ottimale.
Scheda Ruolo: perfeziona il prompt di sistema del bot
La scheda Ruolo migliora il ruolo del tuo chatbot (il suo prompt di sistema). Esamina le domande di test non riuscite e le lacune di conoscenza note, quindi propone un ruolo riscritto mirato a fornire risposte migliori.
Come eseguirla:
- Fai clic su Proponi ruolo migliorato
- Confronta il ruolo attuale e il ruolo proposto affiancati: il testo proposto è modificabile e una spiegazione illustra le modifiche apportate e la relativa motivazione
- Convalida la proposta con un test A/B: scegli l'origine delle domande (Genera 5 nuove domande di test o riutilizza le domande dell'ultima sessione di test) e fai clic su Avvia test A/B
- Le stesse domande vengono poste con entrambi i ruoli, un giudice IA seleziona la risposta migliore per ciascuna domanda e viene fornita una percentuale di successo oltre a un dettaglio domanda per domanda
- Se il nuovo ruolo risulta migliore, fai clic su Applica ruolo per renderlo effettivo
Il test A/B pone ciascuna domanda due volte (attuale rispetto a proposto), quindi una sessione di 10 domande invia circa 20 messaggi di prova conteggiati nella quota mensile, o di più se si testa un modello premium, poiché i modelli più avanzati valgono più di un messaggio. L'applicazione del ruolo richiede il permesso per i Chatbot.
Scheda Arena dei modelli: confronta i modelli IA
La scheda Arena dei modelli esegue la stessa serie di domande su 2–3 modelli IA in parallelo e li confronta in base alla qualità delle risposte (valutata da un giudice IA) e al tempo di risposta mediano. Utilizzala per decidere se un modello più veloce o più economico mantiene una resa adeguata sui tuoi contenuti reali.
Come eseguirla:
- Seleziona 2–3 modelli da confrontare (il modello attuale è contrassegnato)
- Scegli l'origine delle domande (genera nuove domande o riutilizza l'ultima sessione)
- Fai clic su Avvia confronto
- Esamina la tabella dei risultati: percentuale di qualità, latenza mediana e un consiglio sul miglior compromesso tra le due
- Espandi qualsiasi domanda per visualizzare la risposta effettiva di ciascun modello
- Fai clic su Usa per questo bot accanto a un modello per passare a quest'ultimo
Questa scheda utilizza messaggi di chat di prova (conteggiati nella quota mensile) e l'applicazione di un modello richiede il permesso per i Chatbot.
Scheda Test delle conoscenze: testa automaticamente la tua base di conoscenza
La scheda Test delle conoscenze è il classico strumento di test della conoscenza. Genera automaticamente domande di prova realistiche, le esegue sul tuo chatbot, valuta le risposte con l'IA e ti aiuta a colmare eventuali lacune.
Modalità di test
| Modalità | Descrizione | Domande |
|---|---|---|
| Auto Test | L'IA genera domande di prova direttamente dai contenuti della tua base di conoscenza. Le domande coprono diversi argomenti e livelli di difficoltà, con un mix di formulazioni brevi (3–5 parole) e più lunghe. | 3–15 domande |
| Custom Question | Inserisci una domanda specifica che desideri testare. L'IA genera formulazioni alternative (varianti) per verificare lo stesso argomento da diverse angolazioni. | La tua domanda + 2–14 varianti |
Auto Test è ideale per un controllo generale dello stato dell'intera base di conoscenza. Custom Question è ideale per verificare se un argomento specifico o contenuti aggiunti di recente ricevono risposte corrette.
Esecuzione di un test
- Scegli la modalità di test: Auto Test o Custom Question
- Imposta il numero di domande (Auto Test) o di varianti (Custom Question)
- Per la modalità Custom Question: inserisci la tua domanda
- Fai clic su Start Test
Il sistema esegue quindi tre passaggi in modo automatico:
| Passo | Cosa succede |
|---|---|
| Genera | L'IA crea le domande di prova (Auto Test) o le varianti della domanda (Custom Question). |
| Esegui | Ogni domanda viene inviata al tuo chatbot; vengono raccolte la risposta e le eventuali fonti di riferimento. |
| Valuta | L'IA valuta ogni risposta confrontandola con i contenuti della tua base di conoscenza e la classifica. |
Criteri di valutazione
| Classificazione | Descrizione |
|---|---|
| Answered | Corretta, utile e copre il nucleo della domanda. Piccole omissioni su dettagli marginali sono accettabili. |
| Partial | Tematicamente rilevante ma priva di informazioni essenziali che un utente si aspetterebbe. |
| Not Answered | Nessuna risposta, del tutto irrilevante o fondamentalmente errata. |
Per i risultati Partial e Not Answered, l'IA spiega cosa manca o cosa non va. Usa questi suggerimenti per orientare le tue correzioni.
Dashboard dei risultati
Al termine di un test, quattro schede ne riassumono l'esito: Answered, Partial, Not Answered e un punteggio complessivo (Score, risposte valide ÷ totale) con una barra con codice colore:
- Verde (80%+) — la tua base di conoscenza copre bene gli argomenti testati
- Ambra (50–79%) — alcune lacune da risolvere
- Rosso (sotto il 50%) — lacune significative che richiedono attenzione
Ogni domanda testata appare sotto forma di scheda risultato con la domanda, un badge di valutazione, la risposta completa del bot, una raccomandazione (per Partial/Not Answered) e i pulsanti di azione: Fix with AI, Riprova e Find Source.
Fix with AI
Fix with AI è la modalità principale per colmare le lacune individuate durante i test. Analizza tutte le domande fallite, cerca il contesto nella base di conoscenza esistente e genera contenuti per risolvere le mancanze.
- Fai clic su Fix with AI in corrispondenza di un risultato Partial o Not Answered (oppure nel riepilogo dei risultati)
- Il sistema raccoglie tutte le domande fallite e recupera i contenuti correlati dalla tua base di conoscenza
- L'IA redige una bozza di testo che copre le informazioni mancanti, utilizzando dati concreti dalle tue fonti ove disponibili
- Rivedi e modifica la bozza; facoltativamente imposta il nome del documento (se lasciato vuoto, ne viene generato uno automaticamente)
- Fai clic su Add as Data Source per salvarlo come nuova fonte di dati testuale
Dopo il salvataggio, ti verrà richiesto di verificare la correzione: Retest all failed, Retest first (un rapido controllo su una singola domanda) o Later. Il contenuto generato comparirà nella scheda Conoscenze del tuo chatbot, dove rimarrà modificabile.
Find Source
Find Source individua quali fonti di dati esistenti sono rilevanti per una determinata domanda, utile quando preferisci modificare una fonte esistente anziché aggiungere nuovi contenuti.
- Fai clic su Find Source su una scheda risultato
- Il sistema esegue una ricerca nella tua base di conoscenza tramite similarità vettoriale (con fallback sulla ricerca testuale)
- Vengono mostrati fino a 10 risultati corrispondenti, ciascuno con il nome della fonte, il tipo, un punteggio di rilevanza e un'anteprima del contenuto di 500 caratteri
Da qui puoi selezionare Modifica per intervenire direttamente su una fonte di testo oppure Open in Dashboard per passare a quella fonte nella scheda Conoscenze.
Nuovi tentativi e cronologia
- Riprova esegue nuovamente una singola domanda e aggiorna direttamente sul posto la risposta, la valutazione e il punteggio complessivo.
- Retest all failed (dopo Fix with AI) riesegue tutte le domande classificate come Partial e Not Answered in un unico blocco.
- La sezione Test History elenca le ultime 20 sessioni di test per chatbot, indicando punteggio, modalità, chatbot e data. Fai clic su una voce qualsiasi per riaprirne i risultati completi.
Limiti
| Vincolo | Valore |
|---|---|
| Utenti di prova | Max 3 test per chatbot al giorno |
| Generazione delle correzioni | Max 20 richieste all'ora per utente |
| Timeout della domanda | 30 secondi per domanda |
| Timeout globale del test | 120 secondi per sessione di test |
| Domande Auto Test | 3–15 |
| Varianti Custom Question | 2–14 (più la tua domanda originale) |
| Cronologia dei test | Ultime 20 sessioni archiviate |
La Inbox di ottimizzazione
La Inbox di ottimizzazione si trova sotto le schede Ottimizza e Audit e raccoglie in un unico punto i suggerimenti di miglioramento dell'IA. Ogni suggerimento ha un tipo, Lacuna di conoscenza, Contraddizione, Duplicato, Contenuto scarso o Proposta di ruolo, e uno stato:
- Aperti — in attesa di una tua decisione
- Accettati — applicati al tuo chatbot
- Scartati — messi da parte (puoi riaprirli in seguito)
Fai clic su un suggerimento per aprirne la vista di dettaglio. A seconda del tipo vedrai le domande reali alla base di una lacuna, gli estratti delle fonti interessate oppure un confronto tra lo stato attuale e la proposta. Se il suggerimento include contenuti modificabili, puoi perfezionarli prima dell'applicazione. Fai clic su Aggiungi alla base di conoscenza (oppure Applica la riscrittura / Applica ruolo, a seconda del tipo) per applicarlo, oppure su Scarta per ignorarlo.
Best practice
- Inizia con Ottimizza — le conversazioni reali ti mostrano le lacune che incidono effettivamente sulle risposte
- Avvia audit dopo importazioni consistenti — individua le contraddizioni prima che le incontrino i visitatori
- Usa Test delle conoscenze per verificare — dopo aver aggiunto contenuti, conferma che il bot risponda correttamente
- Esegui test A/B sulle modifiche al ruolo — non implementare un nuovo prompt basandoti su un'intuizione, la scheda Ruolo dimostra il reale miglioramento
- Prova Arena dei modelli prima di cambiare modello — assicurati che un modello più veloce continui a rispondere bene con i tuoi dati
- Verifica con le dashboard Domande e Analisi — osserva la diminuzione della metrica Senza risposta man mano che colmi le lacune