Una domanda ai tuoi documenti.
Una fonte da controllare.

Partiamo da documenti e domande reali.

Un insieme circoscritto di manuali e procedure è un punto di partenza migliore di un archivio intero. Raccogliamo domande frequenti, identifichiamo le versioni aggiornate e verifichiamo che i documenti siano utilizzabili.

• Ricerca di informazioni nei manuali tecnici.
• Consultazione di procedure e istruzioni interne.
• Individuazione dei documenti pertinenti a una richiesta.

Le fonti fanno parte della risposta.

Il prototipo deve permettere di aprire il documento e verificare il passaggio recuperato. Valutiamo anche cosa mostrare quando non trova una fonte adeguata e come segnalare l’incertezza.

Un modello può sbagliare anche con documenti di supporto. Le fonti non garantiscono da sole la correttezza di una risposta; non prometto l’eliminazione delle allucinazioni. Le decisioni importanti richiedono verifica umana.

Chi può vedere cosa?

Prima di caricare dati definiamo chi può accedere ai documenti, quali informazioni escludere e dove avviene l’elaborazione. Valutiamo soluzioni locali e servizi esterni in base a requisiti, hardware e budget, senza presentare l’una o l’altra come automaticamente adatta.

Gli accessi ai documenti devono essere rispettati anche dalla ricerca e dalla risposta generata. Il test comprende domande senza risposta, documenti superati e contenuti a cui un utente non deve accedere.

Un esperimento con criteri di valutazione.

Concordiamo un insieme di domande e risposte attese. Misuriamo se le fonti recuperate sono pertinenti, dove il sistema sbaglia e quando è meglio che non risponda. Solo dopo decidiamo se estendere il lavoro.

PRIMA DI PARTIRE

Le domande giuste.