Table of Contents
Inserisci questi controlli nella guida ai dati di sondaggio di alta qualità, impara a rilevare le risposte generate dall'IA e scopri perché le risposte con IA non formano un campione qualificato.
I controlli di qualificazione verificano se le caratteristiche dichiarate da una persona corrispondono ai criteri di inclusione dello studio. Riducono le risposte esterne al pubblico previsto, ma non dimostrano l'identità e non garantiscono da soli dati affidabili. Funzionano meglio quando definisci i criteri prima della raccolta e li abbini a un questionario chiaro e ad altri controlli di qualità.
Non esiste una percentuale universale di risposte inadeguate. Il rischio dipende dalla fonte di reclutamento, dall'incentivo, dal pubblico e dal disegno dello studio. Misura il tasso nel tuo progetto e documenta le regole di inclusione ed esclusione.
Importanza dei controlli delle qualifiche nella ricerca sui sondaggi
L'idoneità deve derivare direttamente dalla domanda di ricerca. Se lo studio riguarda gli studenti di medicina negli Stati Uniti, per esempio, lo status di studente, il Paese e il periodo rilevante fanno parte dei criteri. I controlli aiutano ad applicare queste regole in modo uniforme, anche se spesso si basano su dati autodichiarati e vanno interpretati come indizi, non come prove assolute.
Prendiamo il seguente scenario:
Stai conducendo un sondaggio per esplorare l’atteggiamento degli studenti di medicina negli Stati Uniti nei confronti della pandemia di Covid-19 e l’effetto che ha avuto sul loro rendimento accademico. Come incentivo per la partecipazione al sondaggio, offri a ciascun intervistato la possibilità di partecipare a un'estrazione a premi per un abbonamento gratuito a una palestra.
Motivati dal tuo premio, i seguenti candidati partecipano al tuo sondaggio:
- Uno studente di medicina dell'ultimo anno di Phoenix, Arizona
- Uno studente di medicina del terzo anno di Dallas, Texas
- Uno studente di scuola superiore di 16 anni dalla Germania
- Un potenziale studente di medicina di Fort Worth, Texas
- Uno studente di medicina dell'ultimo anno di Cleveland, Ohio
Lo studente liceale di 16 anni proveniente dalla Germania non è uno studente di medicina e non risiede negli Stati Uniti, quindi puoi facilmente individuarlo e ignorare le sue risposte quando ordini e analizzi i tuoi dati. Se fossi molto cauto, ti renderesti anche conto che, non avendo ancora studiato medicina, il potenziale studente di medicina di Fort Worth non avrebbe sperimentato gli effetti della pandemia di Covid-19 sul suo rendimento accademico, e quindi dovrebbe essere ignorato anche come intervistato. In un gruppo di 5 intervistati, è abbastanza facile individuare coloro che non sono idonei a partecipare al tuo sondaggio. In un gruppo di 200 intervistati, tuttavia, avresti difficoltà a selezionare tutti i tuoi intervistati per cercare di determinare chi è idoneo a includere le proprie risposte nel tuo studio e chi no. A maggior ragione se qualcuno dei partecipanti non fosse sincero e si presentasse erroneamente come uno studente di medicina dell'ultimo anno di Phoenix...
Avvia il controllo di qualificazione.
Diversi tipi di controlli di qualificazione
Esistono due approcci utili: un breve percorso di idoneità e domande specifiche per il pubblico. Non servono entrambi in ogni studio. Usa solo controlli legati a criteri reali ed evita di raccogliere dati personali non necessari.
1. Canalizzazioni di qualificazione
Un percorso di idoneità presenta poche domande per stabilire se una persona può partecipare. Il numero di opzioni dipende dalla variabile: un Paese può richiedere un elenco, mentre una condizione binaria richiede solo due o tre risposte. Definisci in anticipo quali combinazioni consentono di proseguire e offri un'uscita rispettosa a chi non soddisfa i criteri.
ESEMPIO
Stai cercando studenti di marketing olandesi per rispondere al tuo sondaggio. Poni le seguenti domande:
Domanda 1: In quale Paese risiedi?
_ Opzioni di risposta: _
- Stati Uniti d'America
- Regno Unito
- Germania
- Paesi Bassi
- Belgio
- Francia
- Ungheria
- Italia
- Romania
- Sudafrica
- Namibia
- India
_ Domanda 2: Quale delle seguenti lingue è la tua lingua madre?_
_ Opzioni di risposta: _
- Inglese
- Italiano
- Spagnolo
- Mandarino
- Hindi
- Tedesco
- Olandese
- Afrikaans
- Portoghese
- Swahili
- Giapponese
- Arabo
_ Domanda 3: Quale delle seguenti è la tua area di studio?_
_ Opzioni di risposta: _
- Informatica
- Ingegneria
- Istruzione
- Amministrazione aziendale
- Marketing
- Economia
- Linguistica
- Sociologia
- Biologia
- Scienze ambientali
- Nutrizione e Dietetica
- Psicologia
PRECAUZIONI AGGIUNTIVE
- Assicurati che gli intervistati non possano indovinare quali siano le risposte corrette dal titolo del tuo sondaggio. Ad esempio, non utilizzare il titolo "Sondaggio per gli operatori sanitari olandesi", poiché ciò potrebbe portare a individuare cattivi attori, vanificando lo scopo del funnel di qualificazione.
- Randomizza la posizione delle opzioni di risposta corretta per impedire agli intervistati di indovinare la risposta corretta in base alle risposte precedenti. Ad esempio, se la risposta corretta della Domanda 1 è "4", rendi la risposta corretta della Domanda 2 "7", la risposta corretta della Domanda 3 "5" e così via.
- Se possibile, randomizza anche ciò che le opzioni di risposta (ad esempio "A", "B" e "C") rappresentano per ciascun partecipante che partecipa al sondaggio. Alcuni costruttori di sondaggi ti consentono di randomizzare le opzioni per domanda, in modo che le tue risposte vengano visualizzate in un ordine diverso per ogni intervistato.
2. Domande specifiche sul campione
Le domande specifiche del campione sono domande progettate per valutare le conoscenze o le caratteristiche di un partecipante specifiche per il pubblico previsto per l'indagine. La risposta corretta alla domanda è in genere molto ovvia per un intervistato che appartiene al tuo pubblico target, ma non altrettanto per qualcuno che non rientra in questo gruppo. Gli intervistati che sbagliano queste risposte non sono idonei a partecipare al tuo sondaggio e dovrebbero essere esclusi dal tuo set di dati.
ESEMPIO
Stai cercando utenti abituali di Facebook che rispondano al tuo sondaggio. Poni le seguenti domande:
_ Domanda 1: Quale delle seguenti azioni non può essere eseguita su Facebook?_
_ Opzioni di risposta: _
- Mi piace
- Condividi
- Commento
- Ping
- Reagire
- Segui
- Sconosciuto
- Cerca
- Salva
- Rapporto
- Posta
- Tag
_ Domanda 2: Come si chiama l'app di messaggistica di Facebook?_
_ Opzioni di risposta: _
- Facebook Messenger
- Discussioni
- Chat di Facebook
- Chatbox
- Messaggio istantaneo
- DM
- Posta in arrivo
- L'Hub
- Lento
- Ping
- La chat
_ Domanda 3: Dove venderesti un articolo su Facebook?_
_ Opzioni di risposta: _
- Negozio Facebook
- Il Gruppo
- Mercato
- META
- Compra e vendi
- Negozio
- Yaga
- Lo scambio
- Albero della gomma
- Amazzonia
- Zuckersell
- Acquisto su Facebook
PRECAUZIONI AGGIUNTIVE
- Randomizza la posizione delle opzioni di risposta corretta per impedire agli intervistati di indovinare la risposta corretta in base alle risposte precedenti. Ad esempio, se la risposta corretta della Domanda 1 è "4", rendi la risposta corretta della Domanda 2 "7", la risposta corretta della Domanda 3 "5" e così via.
- Se possibile, randomizza anche ciò che le tue opzioni di risposta (ad esempio "A", "B" e "C") rappresentano per ciascun partecipante che partecipa al tuo sondaggio. Alcuni costruttori di sondaggi ti consentono di randomizzare le opzioni per domanda, in modo che le tue risposte vengano visualizzate in un ordine diverso per ogni intervistato.
- Fai attenzione alle conoscenze che presumi abbia il tuo pubblico target. Sebbene gli utenti abituali di Facebook possano sapere cosa fa il pulsante "Condividi", non tutti potrebbero sapere qual è il numero massimo di caratteri quando viene creato un post. Ancora una volta, la risposta corretta dovrebbe essere abbastanza ovvia per il pubblico a cui ti rivolgi.
Verifica qualificazione BONUS
Se stai creando il tuo sondaggio con il generatore di sondaggi di Qualtrics, dovresti assolutamente aggiungere la verifica CAPTCHA per tenere a bada quei robot. Quando aggiungi una nuova domanda al tuo sondaggio, scegli semplicemente "Verifica CAPTCHA" come tipo di domanda. Ciò richiederà la verifica di tutti gli intervistati per poter procedere con il sondaggio e tenere a bada eventuali robot del sondaggio.
Pensieri conclusivi
I controlli di qualificazione rendono più coerenti i criteri di inclusione e riducono alcune risposte esterne al pubblico previsto. Definiscili prima della raccolta, provali con persone reali e documenta le esclusioni. La qualità finale dipende anche dal campionamento, dal questionario e dall'analisi.
P.S. È più facile prevenire i problemi che tentare di correggerli alla fine. Chiedi supporto per pianificare la raccolta dei dati.
Domande frequenti
1. Cosa sono i controlli di qualificazione nella ricerca tramite sondaggio?
Sono domande o regole che confrontano le caratteristiche dichiarate dal partecipante con i criteri di inclusione dello studio. Aiutano a ridurre le risposte esterne al pubblico previsto, ma non garantiscono l'identità né la sincerità.
2. Quali tipi di controlli delle qualifiche vengono comunemente utilizzati?
Spesso vengono utilizzati due tipi principali di controlli di qualificazione: canalizzazioni di qualificazione e domande specifiche del campione. Le canalizzazioni di qualificazione prevedono domande a scelta multipla con una sola risposta corretta, valutando l'idoneità in base a criteri specifici. Le domande specifiche del campione mirano alle conoscenze o alle caratteristiche degli intervistati rilevanti per il pubblico a cui è rivolto l'indagine.
3. Come funzionano i funnel di qualificazione?
Le canalizzazioni di qualificazione consistono in genere in domande a scelta multipla progettate per verificare l'idoneità degli intervistati a partecipare a un sondaggio. Queste domande hanno un'unica risposta corretta tra diverse opzioni. Gli intervistati che rispondono correttamente a tutte le domande della canalizzazione di qualificazione vengono considerati idonei a partecipare ulteriormente al sondaggio.
5. Quali sono le domande specifiche del campione?
Le domande specifiche del campione valutano le conoscenze o le caratteristiche specifiche degli intervistati rispetto al pubblico target dell'indagine. Le risposte corrette a queste domande sono spesso ovvie per il pubblico previsto, ma potrebbe essere difficile per gli altri rispondere correttamente. Gli intervistati che non riescono a rispondere accuratamente a queste domande vengono esclusi dal set di dati.