STRATEGIE DI RILEVAZIONE

Transcript

1 LA RILEVAZIONE DEI DATI Le strategie di rilevazione Metodi quantitativi, qualitativi e misti CORSO DI METODI DI INDAGINE E VALUTAZIONE NELLE SCIENZE SOCIALI Lezione 2: La rilevazione dei dati Strategie, metodi, tecniche di rilevazione Tecniche di rilevazione statistica diretta 2 STRATEGIE DI RILEVAZIONE Osservare RILEVAZIONE DEI DATI Lo strumento di osservazione scelto per la raccolta dei dati può considerarsi come un filtro posto tra l osservatore e l oggetto, cambiando il mezzo di osservazione dallo stesso oggetto possono ottenersi dati differenti, ed è per questo che la loro scelta influenza i dati dell indagine. E la via più diretta e immediata per studiare i fenomeni/comportamenti manifesti Esperimenti Archivi Rilevazioni indirette Domandare E la via obbligata per esplorare motivazioni,atteggiamenti, credenze, sentimenti, percezioni, aspettative,... Rilevazioni dirette 3 I dati possono essere raccolti attraverso: misurazione di entità oggettive (rilevazione delle qualità delle acque dei fiumi italiani); dichiarazioni (questionario). In quest ultimo caso rivestono particolare importanza ai fini della qualità dei dati (mancate risposte, errori di misura): il questionario (strumento di osservazione); le tecniche di intervista (le modalità di somministrazione del questionario); 4 il rilevatore. Anno Accademico 2017/2018 1

2 RILEVAZIONI DIRETTE Definizione : Una rilevazione si definisce diretta quando le osservazioni sono desunte dalle singole unità componenti la popolazione (indagine statistica). Principali svantaggi: Aumento dei costi di rilevazione Maggior disturbo statistico 5 RILEVAZIONI INDIRETTE Definizione: Si definisce rilevazione indiretta (o indagine statistica basata su dati di fonte amministrativa) quella indagine che utilizza i dati amministrativi con finalità di tipo statistico. Caratteristiche: il dato statistico è generato a partire dai dati registrati per la normale attività amministrativa; Principali vantaggi : Riducono il costo della rilevazione; Riducono il disturbo statistico Principali svantaggi: la popolazione alla quale interessa riferire l'informazione può non coincidere con quella della raccolta dei dati amministrativi; i concetti, le definizioni e le classificazioni adottate nella raccolta dei dati amministrativi possono non coincidere con quelli della ricerca statistica; la qualità con cui le informazioni sono raccolte nei dati amministrativi può non essere sufficiente per gli obiettivi della ricerca. 6 SINTETIZZANDO Caratteristic a Dirette Le osservazioni sono desunte dalle singole unità componenti la popolazione. Indirette Si utilizzano i dati amministrativi con finalità di tipo statistico. INDAGINI TOTALI E CAMPIONARIE Totali Caratteristica Viene osservata l intera popolazione oggetto di studio. Campionarie Viene osservata solo un sottoinsieme della popolazione tecnicamente definito campione. Pro Contro Rispondenza tra gli obiettivi dell indagine e l informazione raccolta. Maggiori costi di rilevazione; Maggior disturbo statistico. Minori costi di rilevazione; Minor disturbo statistico. Il collettivo amministrativo può non coincidere con il collettivo statistico; I concetti, le definizioni e le classificazioni adottate possono non coincidere con quelli della ricerca statistica; Minore qualità dei dati amministrativi rispetto agli obiettivi della ricerca. 7 Pro Elevato dettaglio di analisi. Contro Costi elevati; Minore accuratezza dei dati; Ottenimento delle informazioni in tempi più lunghi. Riduzione dei costi; Possibilità di effettuare rilevazioni più accurate; Ottenimento delle informazioni in tempi più brevi. Basso dettaglio di analisi. 8 Anno Accademico 2017/2018 2

3 Scelta del disegno di indagine POPOLAZIONE Popolazione: insieme di unità elementari ben identificabili, delle quali interessa studiare una o più caratteristiche ad esse comuni. Ciò che fa di un aggregato di elementi una popolazione, infatti, è proprio l esistenza di una caratteristica presente in tutte le unità, che può divenire oggetto di analisi. L insieme delle parole di cui si compone un libro è una popolazione se si esamina una qualche loro proprietà, come la lunghezza. CAMPIONE Campione: sottoinsieme di una totalità di elementi che viene assunto a rappresentare la totalità stessa, costituita dalla popolazione oggetto di indagine. Sostanzialmente il campione rappresenta la parte della popolazione che viene osservata. I criteri usati per la formazione dei campioni possono essere diversi ma, affinché le informazioni ottenute dal campione possano essere estese alla popolazione di provenienza, è necessario che il campione sia rappresentativo ovvero riproduca le caratteristiche più rilevanti della popolazione di origine. POPOLAZIONE CAMPIONE 9 10 IL CICLO DI VITA DI UNA RILEVAZIONE DIRETTA IL CENSIMENTO Concetti Questionario Obiettivi di ricerca Modalità di raccolta dati Popolazione Pianificazione della raccolta ed elaborazione dei dati Stima/Analisi Disegno Campionario Raccolta ed elaborazione dei dati Legenda: elementi specifici del ciclo di vita dell indagine campionaria Scelta del disegno campionario 11 Il censimento è una rilevazione: Totale o universale Viene osservata l intera popolazione di riferimento; Simultanea Le notizie devono essere riferite allo stesso istante (la situazione rilevata deve essere quella del momento stabilito come data di riferimento del censimento); Periodica Viene ripetuta ad intervalli regolari (ha cadenza decennale). I censimenti dell Istat: Censimento Generale dell Agricoltura Censimento Generale della Popolazione e delle Abitazioni Censimento Generale dell Industria, dei Servizi e delle Istituzioni Non Profit Censimento delle Istituzioni Pubbliche 12 Anno Accademico 2017/2018 3

4 CRITERI DI SCELTA DEL CAMPIONE INDAGINE CAMPIONARIA Criteri probabilistici : L indagine campionaria si rende necessaria quando: l ampiezza della popolazione è infinita; Il piano di campionamento avviene mediante meccanismi aleatori. In tal caso è possibile determinare la probabilità (costante o variabile) di estrarre un unità statistica: quando la rilevazione comporta la distruzione delle unità osservate. Inoltre essa è spesso opportuna per una serie di motivi tra cui principalmente: riduzione dei costi; ottenimento delle informazioni in tempi più brevi; migliore qualità dei dati in termini di accuratezza, ovvero di precisione. campioni casuali semplici (la probabilità di entrare a far parte del campione è uguale per tutte le unità della popolazione); 13 CRITERI DI SCELTA DEL CAMPIONE Criteri non probabilistici: Il piano di campionamento prescinde dai criteri di casualità nella scelta delle unità campionate : campioni a scelta ragionata (le unità statistiche vengono individuate mediante criteri logici di rappresentatività, conoscenza specialistica del problema, ecc.); campioni per quota (le unità statistiche vengono scelte dal rilevatore in modo che il campione complessivo rispetti delle proporzioni predefinite da chi ha pianificato l indagine); campioni con probabilità variabili (ad ogni unità della popolazione viene associata una diversa probabilità di estrazione). 14 Indagini trasversali e longitudinali La rilevazione è: - longitudinale (panel): riferita a una coorte di individui seguiti nel tempo - - trasversale (cross-sectional): se riferita ad un periodo specifico Anni di età trasversale longitudinale Diagramma di Lexis 4 2 campioni volontari (le unità statistiche decidono autonomamente se far parte del campione oppure no) Anno Accademico 2017/ Anni di calendario 4

5 LA RILEVAZIONE DEI DATI QUALY/QUANTY/MIXED METHODS Le strategie di rilevazione Metodi quantitativi, qualitativi e misti Tecniche di rilevazione statistica diretta Metodo quantitativo: qualsiasi metodo di rilevazione progettato per produrre numeri Es: conteggio, misurazione, indagine statistica Metodo qualitativo: qualsiasi metodo di rilevazione progettato per produrre parole Es: analisi documentale, interviste ermeneutiche, Metodi misti: qualsiasi metodo di rilevazione che utilizza una combinazione di metodi quantitativi e qualitativi (Greene, Caracelli e Graham, 2007) LE INTERVISTE LE INTERVISTE Interviste strutturate con questionario (survey; rilevazioni; indagini). Dati quantitativi Dati qualitativi ogni forma di interazione fra un intervistatore ed un intervistato volta ad acquisire informazioni attraverso la proposta di domande (ma non necessariamente solo domande). L intervista deve essere palese e la sua finalità accettata dal soggetto rispondente; I tipi di intervista si possono definire in base alla direttività e alla standardizzazione, come si vede dalla figura. 19 Si utilizzano nell ambito della ricerca quantitativa; producono una serie di informazioni codificate ex ante e organizzate in una matrice di dati, trattabili con strumenti statistici Presuppongono una elevata conoscenza ex ante dell oggetto di indagine per poter strutturare adeguatamente il questionatrio Interviste semi-strutturate e non strutturate (interviste in profondità): si utilizzano quando è necessaria una esplorazione preliminare o se lo scopo principale è la comprensione approfondita dei fenomeni 20 Anno Accademico 2017/2018 5

6 BR AINSTORMING Che cosa? FOCUS GROUP Perchè? una tecnica che incentiva la produzione di idee entro un gruppo di pari. L obiettivo è incentivare la produzione di un considerevole numero di idee senza preoccuparsi in prima istanza del loro valore e della loro capacità di portare a soluzione il problema Le regole: a) la critica è esclusa: il giudizio negativo sulle idee deve essere rimandato ad un secondo tempo; b) la corsa in folle è ben accetta: più é audace l idea meglio è; è più facile frenare che incoraggiare; c) si cerca la quantità: quanto maggiore sarà il numero delle idee tanto più probabile sarà trovarne di utili e di qualità; d) si cercano combinazioni e miglioramenti: oltre a contribuire con idee proprie, i partecipanti dovrebbero suggerire come le idee altrui possono essere trasformate in idee migliori o come due idee possono essere fuse in un altra idea ancora. Quello che interessa non è la ragione delle idee prodotte, ma la loro qualità in relazione allo scopo cognitivo che generalmente è la ricostruzione del campo semantico dell oggetto di studio 21 Intervista rivolta a un gruppo omogeneo di 7/12 persone, la cui attenzione è focalizzata su un argomento specifico che viene scandagliato in profondità. Un moderatore indirizza e dirige la discussione fra i partecipanti e ne facilita l interazione. Ogni partecipante ha l opportunità di esprimere liberamente la propria opinione rispetto all argomento trattato; la comunicazione nel gruppo è impostata in modo aperto e partecipato, con un alta propensione all ascolto. Il contraddittorio positivo che ne consegue consente di far emergere i reali punti di vista, giudizi, pregiudizi, opinioni, percezioni e aspettative del pubblico in modo più approfondito di quanto non consentano altre tecniche di indagine; rispetto ad altre tecniche di intervista, il focus group si caratterizza per avere tutte le seguenti caratteristiche: un gruppo (non un singolo individuo) come fonte di informazione; interazione reale fra i partecipanti (riuniti in una sede); focalizzazione su uno specifico argomento; interesse del ricercatore verso l approfondimento, piuttosto che verso la generalizzazione; presenza di uno o più moderatori (detti anche facilitatori 22 OSSERVAZIONE (PARTECIPANTE) E un metodo per reperire informazioni non preesistenti senza interferire con l oggetto di studio e quindi senza introdurre stimoli nei confronti dell oggetto di studio (quali possono essere le domande di un intervista ad esempio). Ci sono molteplici approcci all osservazione, che può essere più o meno partecipata, con un maggiore distacco del ricercatore/osservatore fino alla totale immersione nel contesto osservato (tipica delle ricerche etnografiche). 23 METODI MISTI Sono disegni della ricerca in cui si utilizzano almeno un metodo quantitativo e almeno un metodo qualitativo, nessuno dei quali sia, tuttavia, intrinsecamente legato a un qualche specifico paradigma di ricerca (Greene, Caracelli e Graham, 2007, 273) varie forme di metodi misti a partire dagli scopi: triangolazione, come uso intenzionale di metodi (tecniche) diverse per una conferma di validità (convergenza dei dati); complementarietà (anche: multiplismo), per approfondire, arricchire e chiarire i risultati di un metodo attraverso un altro; sviluppo: utilizza in risultati di un metodo per sviluppare o informare le procedure di un altro; nuovo avvio: cerca con metodi diversi di cogliere un paradosso, una contraddizione, una nuova prospettiva di analisi; espansione: cerca di estendere la portata e l ampiezza di un indagine utilizzando metodi diversi per aspetti differenti della ricerca. 24 Anno Accademico 2017/2018 6

7 LA RILEVAZIONE DEI DATI Le strategie di rilevazione Metodi quantitativi, qualitativi e misti Tecniche di rilevazione diretta TECNICHE DI RILEVAZIONE DIRETTA CATI (Computer Assisted Telephone Interview) Interviste telefoniche realizzate mediante il supporto di un computer CAPI (Computer Assisted Personal Interview) Interviste faccia a faccia in cui l intervistatore somministra il questionario avvalendosi di un computer per la registrazione delle risposte PAPI (Paper and Pen Interview) Tradizionali interviste faccia a faccia realizzate mediante l ausilio di un questionario cartaceo TECNICHE DI RILEVAZIONE DIRETTA CASI (Computer Assisted Self-completed Interviewing) Il rispondente completa da solo il questionario servendosi di un PC portatile che gli viene fornito dall ente promotore dell indagine. SCELTA DELLA TECNICA Tecnologia Intervistatore Intervistatore SI Intervistatore NO CAWI (Computer Assisted Web Interview) Indagini on-line. Tale tecnica è stata utilizzata per il 15 Censimento Generale della Popolazione e delle Abitazioni; Postali questionario cartaceo o digitale inviato per e- mail. 27 Con computer CATI, CAPI CASI, CAWI Senza computer PAPI Postali 28 Anno Accademico 2017/2018 7

8 INTERVISTA FACCIA A FACCIA L intervistatore somministra un questionario strutturato ai rispondenti: PAPI - cartaceo CAPI - intervista assistita da computer Vantaggi adeguata per interviste complesse; può essere controllata l identità del rispondente; possono essere usati supporti per le domande (aiuti visivi); CAPI: check automatici possono controllare l editing, la completezza e la coerenza; alta flessibilità (domande aperte, ). Svantaggi molto costose; organizzazione sul campo complessa; effetto intervistatore; possibile presenza di altre persone durante l intervista; difficoltà a rispondere a domande sensibili; effetto desiderabilità sociale: i rispondenti desiderano apparire persone per bene. INTERVISTA TELEFONICA Un intervistatore somministra un questionario strutturato ai rispondenti mediante il telefono: CATI - cartaceo Vantaggi processo di raccolta dati più rapido; meno costoso; possibilità di monitorare l intervistatore (ritorno informativo immediato); riduzione dell effetto intervistatore (grazie all anonimato); check automatici: editing, completezza e coerenza. Svantaggi minore flessibilità (impossibile somministrare domande complesse, usare aiuti visivi, domande aperte, ecc.); difficoltà di controllare l identità dell intervistato; l intervistatore mantiene un ruolo cruciale; problemi di copertura (legati alla sempre minore disponibilità di elenchi telefonici). AUTOCOMPILAZIONE MULTICANALITA I questionari sono consegnati alle unità di osservazione che li compilano e li riconsegnano: Postali - questionario cartaceo o digitale inviato per CAWI - Indagini on-line Spesso sono usati due o più modi di raccolta dei dati, per risparmiare, migliorare la copertura, aumentare il tasso di risposta e ridurre gli errori di misura. Vantaggi poco costose; nessun effetto intervistatore; bassi rischi di distorsioni dovute all effetto desiderabilità. Svantaggi alti tassi di non-risposta; forte auto-selezione dei rispondenti; maggiori errori dei rispondenti (errori di lettura, errori di comprensione, errori di interpretazione); nessun controllo sul soggetto che realmente risponde alle domande. In occasione del 15 Censimento Generale della Popolazione e della Abitazioni, il questionario è stato inviato alle famiglie per posta e la sua restituzione poteva avvenire tramite una pluralità di canali: compilazione on line; compilazione e restituzione in busta chiusa del questionario cartaceo presso un qualsiasi Ufficio Postale; compilazione del questionario cartaceo e restituzione presso l Ufficio Comunale di Censimento; compilazione del questionario cartaceo e restituzione al rilevatore. 32 Anno Accademico 2017/2018 8

9 ASPETTI CHE INFLUENZANO LA SCELTA DELLA TECNICA Aspetti Tecnica Tema trattato Insistenza per ottenere risposta Complessità (salti e controlli di coerenza) Postale o Autocompilata Possibili tutti i temi anche quelli delicati Possibile poca insistenza/temp o a disposizione del rispondente per fornire risposta Struttura dei salti molto semplice, controlli non presenti Telefonica Possibili tutti i temi anche quelli delicati Rischio che l insistenza si traduca in risposte veloci e vaghe Può essere anche molto complesso Faccia a faccia Possibili tutti i temi anche quelli delicati, se si adotta una strategia per proteggere il rispondente Rischio che il Rispondente si senta pressato a prendere posizione Può essere molto complesso con CAPI e meno con PAPI Fonte: Istat, La misurazione della qualità nelle indagini statistiche, 2009 Autocompilata con ausilio di pc Possibili tutti i temi anche quelli delicati, se si adotta una strategia per proteggere il rispondente Possibile poca insistenza Salti anche complessi, controlli semplici; necessario mantenere semplice la navigazione 33 ASPETTI CHE INFLUENZANO LA SCELTA DELLA TECNICA Aspetti Tecnica Lunghezza/ Durata Postale o Autocompilata Lunghezza limitata (1-7 pagine) Telefonica Durata limitata: non più di 15/20 minuti Faccia-a-faccia Sono possibili molte domande Autocompilata con ausilio di pc Durata molto limitata Quanto deve essere lungo un questionario? Quanto deve durare l intervista? Obiettivo: Minimizzare il respondent burden (disturbo statistico); Se troppe domande: rischio di interruzione dell intervista o di aumento delle mancate risposte parziali (autocompilate); La lunghezza è cruciale per il completamento delle interviste CATI e CAWI. 34 Fonte: Istat, La misurazione della qualità nelle indagini statistiche, ASPETTI CHE INFLUENZANO LA SCELTA DELLA TECNICA Aspetti Tecnica Ambiente del rispondente/ atmosfera confidenziale Supporto e/o influenza sul rispondente Tasso di risposta Equipaggiame nto tecnico necessario Postale o Autocompilata Nessun controllo su chi risponde/ Atmosfera neutrale Né supporto né influenza da parte dell intervistatore Abbastanza basso Nessuno Telefonica Minori problemi su presenza di altri/confidenzialit à semi garantita Meno spazio per l influenza da parte dell intervistatore Faccia-afaccia Più problemi a restare solo con l intervistato/ Serve strategia: intervistatore ben formato L intervistatore può fornire supporto, ma anche influenzare Abbastanza alto Alto Basso Telefono e numero accessibile Nessuno Fonte: Istat, La misurazione della qualità nelle indagini statistiche, Autocompila ta con ausilio di pc Nessun controllo su chi risponde/ Atmosfera neutrale Né supporto né influenza da parte dell intervistato re Computer e/o connessione 35 WEB Anno Accademico 2017/2018 9