La “quality question”: come usarla?

La “quality question”: come usarla?

In Made in Surveys utilizziamo domande di verifica per garantire che i dati raccolti siano dei più alti standard di qualità: è vero che purtroppo alcuni relatori non prendono sul serio i sondaggi. Uno dei compiti del responsabile di ricerca è stanarli usando metodi diversi. Uno di questi metodi è la “domanda di qualità” che presenteremo oggi.

Di solito osserviamo (con i nostri panel proprietari) la rimozione di circa il 10% delle risposte complessive, sia durante lo studio, con i controlli automatici in atto, sia manualmente dopo la chiusura del sondaggio e la revisione dei dati da parte di uno dei responsabili della ricerca.

Questo è problematico, non solo a causa del tempo impiegato nella pulizia dei dati, ma anche perché implica la previsione di un campione aggiuntivo che può essere un compito difficile soprattutto con profili complessi o studi con bassi tassi di incidenza.

La domanda sulla qualità è uno dei tanti modi per risparmiare molto tempo sui controlli di qualità manuali, nonché un ottimo modo per garantire il maggior numero di questionari completi e validi nel rapporto finale.

Quali sono le “quality questions” più diffuse e come utilizzarle?

Diverse domande sulla qualità possono essere utilizzate a seconda di ciò che stiamo cercando di ottenere:

• Domande di verifica: per essere sicuri che l'intervistato sia effettivamente una persona reale e che abbia tutti gli strumenti a sua disposizione per rispondere correttamente.
• Domande di attenzione: solitamente utilizzate all'interno di lunghi questionari per garantire che il partecipante rimanga attento durante tutto lo studio.


Domande di verifica:

Queste domande interromperanno o escluderanno il partecipante se non risponde. Sono generalmente utilizzate all'inizio di un sondaggio.


• Captcha aiuta a impedire a robot o bot di accedere al sondaggio. Per gli studi con più partner, un captcha è uno strumento di base ma estremamente utile per ostacolare i bot che tentano di rispondere ai questionari.



• La video domanda: anche questa è una domanda estremamente semplice e basilare, che permette di verificare in pochi secondi che l'intervistato riesca a sentire e vedere immagini/video che vengono mostrati nel corso del sondaggio: mostriamo un video con un'immagine scollegata dal suono, chiedendo al partecipante cosa vede e cosa sente.


Ma attenzione a non utilizzare sistematicamente la stessa associazione di video e suono o gli intervistati potrebbero ricordare la combinazione. In MIS Group, abbiamo oltre dieci possibili combinazioni, per evitare che i falsi intervistati passino la selezione.

Domande di attenzione:

Generalmente, queste domande vengono utilizzate per assicurarsi che l'intervistato stia prestando attenzione a ciò che sta facendo (all'interno del sondaggio) e che stia rispondendo onestamente a tutte le domande.

La domanda ripetuta: viene posta una domanda identica all'inizio e alla fine del questionario, poi c'è un controllo automatico per vedere se entrambe le risposte corrispondono e quindi la coerenza: gli intervistati che non spuntano la stessa risposta vengono filtrati.

La domanda di istruzione: questa domanda viene generalmente aggiunta a metà del sondaggio e viene solitamente utilizzata per individuare gli intervistati disattenti. In genere è una domanda molto semplice come: “Spunta la casella blu”; gli intervistati che non danno la risposta giusta vengono automaticamente filtrati.

La domanda logica: molto simile alla domanda di istruzione, qui vogliamo verificare che gli intervistati leggano e riflettano per tutto il percorso attraverso il questionario. ad esempio: « Che giorno è oggi? »

Attenzione però a non entusiasmarsi eccessivamente con le domande di qualità, o si rischia di perdere i rispondenti più onesti: consigliamo sempre di non rendere le domande di qualità troppo complesse o soggettive.

Ad esempio, un altro tipo di domanda sulla qualità è la ripetizione di una domanda posta in precedenza, ma con gli elementi in un altro ordine. Questo tipo di domanda di qualità ha dimostrato di filtrare anche gli intervistati "onesti" poiché una risposta riflessa non significa che sia di cattiva qualità.

Soluzioni alternative da utilizzare (che sarà l'argomento di un prossimo articolo)

Purtroppo, le domande di qualità da sole non bastano a garantire la bontà dei dati di uno studio quantitativo online!

A nostra disposizione esistono altri strumenti, a seconda di ciò di cui si ha bisogno: cancellazione automatica dei rispondenti che rispondono troppo velocemente, verifica manuale delle risposte alle domande aperte, verifica manuale e automatica dei partecipanti che rispondono troppo velocemente o troppo sistematicamente alle domande a matrice ecc.

Faremo in modo di trattarli in un prossimo articolo.