Ricerca non moderata

La ricerca non moderata è una ricerca sugli utenti condotta senza la presenza di un facilitatore, in cui i partecipanti completano i compiti e rispondono alle domande in autonomia, guidati da istruzioni scritte fornite tramite una piattaforma di test. Le sessioni vengono in genere registrate, acquisendo l'attività sullo schermo, i clic e spesso anche la narrazione audio e il video della webcam, e i risultati vengono analizzati in seguito.

I suoi principali vantaggi sono la scalabilità, la velocità e il costo. Mentre uno studio moderato potrebbe coinvolgere otto partecipanti nell'arco di due settimane, uno studio non moderato può raccogliere cinquanta o più sessioni in un solo giorno, a una frazione del costo per partecipante e con partecipanti distribuiti in diversi fusi orari e aree geografiche. Questo cambia radicalmente l'utilizzo della ricerca: diventa possibile effettuare test di routine, confrontare diverse alternative di progettazione, includere molteplici segmenti di mercato e ottenere misure quantitative come il tasso di successo e il tempo impiegato con campioni di dimensioni tali da garantire una reale precisione.

Il compromesso consiste nella perdita della possibilità di porre domande adattive. Un moderatore nota confusione e chiede spiegazioni, approfondisce un commento inatteso, corregge un partecipante che ha frainteso il compito e si accorge quando accade qualcosa di interessante che non era previsto. Nulla di tutto ciò è possibile senza moderazione. I partecipanti che interpretano male un'istruzione producono dati inutilizzabili, quelli che riscontrano un problema tecnico semplicemente abbandonano, e i comportamenti interessanti rimangono inspiegati perché non c'era nessuno a chiedere chiarimenti.

Questo determina per quali scopi il metodo è adatto. Il lavoro non moderato funziona bene su compiti mirati e ben definiti con chiari criteri di successo, su studi comparativi, su benchmark e monitoraggio nel tempo e su studi quantitativi di primo clic, tree testing e preferenze. Funziona male sulla ricerca esplorativa in ambiti problematici non familiari, su scenari complessi a più fasi che richiedono una configurazione, su argomenti delicati e su qualsiasi cosa in cui l'obiettivo è comprendere la motivazione piuttosto che osservare il comportamento.

La progettazione dei compiti e delle istruzioni ha un peso molto maggiore rispetto al lavoro moderato, perché le istruzioni costituiscono l'intero protocollo e non possono essere chiarite. I compiti devono essere inequivocabili, formulati nel vocabolario del partecipante piuttosto che in quello dell'interfaccia, sufficientemente realistici da suscitare un comportamento autentico e abbastanza brevi da mantenere alta l'attenzione. Una fase pilota con un piccolo numero di partecipanti, al solo scopo di individuare eventuali ambiguità nella formulazione, previene gran parte dello spreco che si verifica quando cinquanta sessioni arrivano rispondendo a una domanda leggermente diversa da quella prevista.

Le registrazioni stesse sono spesso il risultato più prezioso e al contempo il più trascurato. Un riepilogo quantitativo che mostra che il trenta percento dei partecipanti non è riuscito a completare un compito è convincente a livello astratto, mentre un breve video di due minuti che ritrae una persona reale visibilmente frustrata di fronte a una schermata specifica può cambiare le decisioni. Realizzare un breve riassunto dei momenti salienti delle sessioni non moderate costa un'ora di lavoro e si rivela costantemente più efficace di qualsiasi report nel garantire le risorse necessarie per la risoluzione dei problemi. Gli stessi video sono utili anche per favorire una comprensione condivisa all'interno di un team, poiché chi implementa una soluzione raramente legge l'analisi, ma può facilmente osservare un cliente in difficoltà con un prodotto che ha creato.

Anche la qualità dei partecipanti richiede una gestione attiva. I partecipanti al panel che completano molti studi sviluppano abitudini diverse da quelle degli utenti reali e le domande di screening possono essere facilmente manipolate da chi desidera l'incentivo. Sono necessari uno screening basato su comportamenti verificabili piuttosto che sull'autovalutazione, controlli dell'attenzione durante la sessione e una revisione manuale delle registrazioni prima di includerle nell'analisi. In pratica, la maggior parte dei partecipanti maturi ricerca dell'utente i programmi eseguono deliberatamente entrambe le modalità: non moderata per la misurazione, il confronto e la convalida di routine su larga scala, e moderata per il lavoro esplorativo in cui capire il perché è più importante che contare quanto spesso, con i due che alimentano le stesse decisioni in un progettazione del prodotto