Test del chatbot
Testa il tuo chatbot AI prima che lo facciano i tuoi clienti
Descrivi un cliente e com'è una buona chat. Un'AI interpreta quel cliente contro il tuo agente reale, un giudice AI valuta la chat come superata o non superata con una motivazione, e nel frattempo non viene inviato, prenotato o salvato nulla.
Visitatore: Il mio ordine è in ritardo di una settimana. Voglio essere rimborsato.
Agente: Mi dispiace per il ritardo. Mi dai il numero d'ordine, così controllo il rimborso?
Visitatore: È il 1042.
Agente: Grazie. Avvio la richiesta di rimborso per l'ordine 1042. Il rimborso sarà definitivo solo quando verrà confermato.
Una correzione può rompere in silenzio un'altra risposta
Rendi più rigide le istruzioni perché l'agente smetta di promettere rimborsi, e una settimana dopo non chiede più il numero d'ordine. Aggiungi un nuovo listino prezzi, e una vecchia pagina lo contraddice. La maggior parte dei team testa un chatbot scrivendo qualche domanda dopo ogni modifica: così trova il problema che sta correggendo e perde quelli che non sta cercando. Testare davvero un chatbot AI significa rigiocare le conversazioni importanti a ogni modifica, con gli stessi strumenti che l'agente usa sul serio, senza mandare email al team o prenotare appuntamenti nel frattempo.
Controlla le conversazioni importanti con un clic
I test con clienti simulati si trovano nel Playground, sotto la chat. Sono inclusi da Starter.
Clienti simulati
Per ogni test descrivi chi è il cliente, come si comporta e cosa vuole. Un'AI lo interpreta, nella lingua che la descrizione suggerisce: "un cliente italiano" scrive in italiano.
Il tuo agente reale
L'agente risponde esattamente come sul tuo sito: con istruzioni, limiti, conoscenza, procedure e strumenti salvati. Testi quello che riceverebbero i visitatori, non una copia.
Un giudice AI che motiva
Quando la chat finisce, un giudice la legge rispetto ai tuoi criteri di successo e la valuta Pass o Fail, con la motivazione. In alto vedi la percentuale di test superati.
Nessun effetto collaterale
Azioni, passaggi al team, richieste di live chat, prenotazioni, ricerche di ordini e invii di moduli sono simulati. Nessuno riceve email, nessun ticket viene aperto e nulla viene prenotato.
Bozze a confronto
Nel Playground, Compare fa la stessa domanda alle impostazioni salvate e a una bozza modificata, così vedi quale risponde meglio prima di cambiare qualcosa sul tuo sito.
Come funziona un test
Scrivi il test
Clicca su Add test e inserisci un nome, il cliente, il suo obiettivo e i criteri di successo: cosa l'agente deve fare, o non fare mai. Se vuoi, imposta un primo messaggio e Max turns, da 1 a 8 risposte (6 di default).
Eseguine uno o tutti
Run avvia un singolo test e Run all esegue tutti i test dell'agente, uno dopo l'altro. La pagina mostra ogni risultato appena è pronto. Cancel ferma l'esecuzione al passo successivo.
Il cliente chatta fino alla fine
Il cliente simulato scrive, il tuo agente risponde con i suoi strumenti reali e la chat continua finché il cliente raggiunge l'obiettivo, si arrende o l'agente ha risposto Max turns volte.
Leggi il verdetto
Ogni test mostra Pass, Fail o Error. Aprilo per leggere la motivazione del giudice e l'intera chat, con gli strumenti usati dall'agente sotto ogni risposta. Recent runs conserva le tue ultime 10 esecuzioni.
Dettagli sui test
Fino a 25 test per agente
Parti dalle conversazioni più importanti: la domanda più frequente, un rimborso o una disdetta, una domanda che l'agente deve rifiutare, la richiesta di una persona. Puoi modificare o eliminare un test quando vuoi; i risultati passati ne conservano il nome.
Azioni di sola lettura, se vuoi
Nei test le azioni API non vengono chiamate: l'agente riceve un risultato segnato come simulato. Con Allow read-only actions le azioni con metodo GET vengono eseguite davvero, così le risposte possono usare i tuoi dati reali.
Procedure passo dopo passo
Le procedure si svolgono come sempre, con lo stato tenuto solo per il test. Le loro azioni sono simulate come le altre, e le azioni nel browser del visitatore vengono saltate.
Niente nelle tue statistiche
I test non compaiono mai in Conversations, Leads, argomenti o statistiche della dashboard. Moduli lead e moduli in chat possono apparire, ma nulla viene inviato e non parte nessun avviso o webhook.
Prova modelli e bozze
Il Playground risponde con le istruzioni, i limiti e il modello sullo schermo, salvati o no. In Compare, A usa le impostazioni salvate e B la tua bozza, ognuno con il proprio modello. Use B copia la bozza nelle impostazioni.
Prova come visitatore autenticato
In Test as a signed-in visitor inserisci un ID utente, nome, email e metadati per chattare nel Playground come visitatore verificato. Le azioni lato server ricevono gli stessi segnaposto dei visitatori reali.
Why this answer, dopo il lancio
Sotto ogni risposta di una trascrizione, Why this answer mostra un livello di confidenza e la conoscenza e le azioni da cui è nata la risposta, così trovi la fonte di una risposta sbagliata.
History per annullare una modifica
Ogni salvataggio conserva una versione delle impostazioni dell'agente. History confronta qualsiasi versione con quelle attuali riga per riga, e il proprietario o un admin può ripristinarne una precedente in un passo.
Domande frequenti
Come testo un chatbot AI prima di metterlo online?
Fai nel Playground le domande più frequenti dei tuoi visitatori: risponde con le impostazioni sullo schermo, salvate o no. Poi aggiungi test con clienti simulati per le conversazioni che devono funzionare, eseguili tutti dopo ogni modifica e leggi le trascrizioni di quelli falliti. Con Compare provi nuove istruzioni accanto a quelle salvate prima di salvarle.
Che cos'è un test con clienti simulati?
Un test descrive un cliente, il suo obiettivo e cosa deve fare l'agente perché la chat sia superata. Un'AI interpreta quel cliente e chatta con il tuo agente, che risponde con impostazioni e strumenti reali. Alla fine un giudice AI legge la chat e la valuta Pass o Fail, con una motivazione.
I test inviano email, prenotano appuntamenti o chiamano le mie API?
No. Passaggi al team e richieste di live chat sono simulati: nessuno riceve email, messaggi Slack o ticket. Nessun calendario viene interrogato e nessun ordine cercato. Le azioni API restituiscono dati simulati, a meno che tu non attivi Allow read-only actions, che esegue davvero le azioni GET. La ricerca web, se attiva, cerca davvero.
Posso fidarmi del giudice?
Per lo più sì, ma non alla cieca. Anche il giudice è un'AI e può sbagliare, e il cliente simulato non si comporta sempre come uno vero. Leggi la trascrizione prima di cambiare l'agente per un Fail, e scrivi criteri verificabili dalla chat stessa, come "chiede il numero d'ordine prima di cercare qualcosa".
I test consumano i miei messaggi?
Ogni risposta del tuo agente in un test conta come un messaggio nel Playground: uno con il modello predefinito, di più con un modello più grande. Il cliente simulato e il giudice non contano. Prima di avviare, la sezione mostra quanti messaggi può usare al massimo un'esecuzione con un modello da un messaggio; spesso ne usa meno, perché il cliente chiude prima.
Quali piani includono i test?
I test con clienti simulati fanno parte dei piani Starter, Pro ed Enterprise. In Free la sezione Tests mostra "Included from Starter". Playground, chat temporanee e Compare sono disponibili in ogni piano.
Chi nel mio team può eseguire i test?
Editor, admin e proprietario possono aggiungere, modificare, eliminare ed eseguire test. I viewer vedono i test e i risultati ma non possono cambiarli né avviarli. Per ogni agente può girare una sola esecuzione alla volta.
Posso confrontare due versioni delle mie istruzioni?
Sì. Attiva Compare nel Playground: A risponde con le impostazioni salvate e B con una bozza modificata di istruzioni, limiti e lingua di risposta, e ogni lato può usare il proprio modello. Clicca su Send to both, e su Use B quando B risponde meglio. Entrambe le chat sono temporanee e ogni invio usa i messaggi di entrambi i lati.
Sappi che il tuo agente funziona prima che lo scoprano i visitatori
Crea il tuo agente gratis, provalo nel Playground e aggiungi test con clienti simulati da Starter.
Crea il tuo agente gratisPiano gratuito, nessuna carta di credito.