Online Survey Tools Strumenti per indagini online Corso Unioncamere Lombardia Modulo #7 Milano 29/5/2013 Eric Sanna eric.sanna.plus@gmail.com
Sommario I. Finalità della raccolta dati II. Modalità di raccolta dati ----- III. Principali caratteristiche da prendere in considerazione ----- IV. Gli strumenti più diffusi 2
3 I. Finalità della raccolta dati
Perchè raccogliere dati #1/2 Effettuare indagini statistiche come mission aziendale o istituzionale Orientare le strategie aziendali Ottenere feedback dai propri clienti/utenti riguardo i prodotti/servizi offerti Raccogliere idee rispetto a nuovi prodotti/servizi da offrire (crowdsourcing) Condurre progetti di ricerca Effettuare sondaggi (polls) e consultazioni pubbliche su attività e fenomeni di pubblico interesse, es. sondaggi elettorali, consultazioni per definizione di politiche territoriali 4
Perchè raccogliere dati #2/2 Effettuare valutazioni del personale (Assessment 360 ) Raccogliere dati, anche personali, per partecipazioni ad eventi, es. convegni Effettuare test di comprensione, es. quiz con domande a tempo Distribuire petizioni su questioni di pubblico interesse, es. raccolta di firme pro/contro qualcosa/qualcuno 5
Effettuare indagini statistiche come mission aziendale o istituzionale #1/3 Codice italiano delle statistiche ufficiali (Direttiva Comstat n.10 del 17 marzo 2010) CONTESTO ISTITUZIONALE I fattori istituzionali e organizzativi influiscono in modo rilevante sull efficienza e sulla credibilità della statistica ufficiale. PROCESSI STATISTICI Gli orientamenti, le buone pratiche e gli standard nazionali e internazionali vanno pienamente rispettati nei processi utilizzati dalle autorità statistiche per organizzare, rilevare, elaborare e diffondere le statistiche ufficiali. Un efficiente gestione rafforza la credibilità delle statistiche. PRODUZIONE STATISTICA Le statistiche disponibili devono soddisfare le esigenze degli utenti. Le statistiche rispettano le norme sulla qualità e rispondono ai bisogni delle Istituzioni, delle Amministrazioni pubbliche, degli Istituti di ricerca, delle imprese e del pubblico in generale. 6
Effettuare indagini statistiche come mission aziendale o istituzionale #2/3 Princìpi della produzione statistica (ufficiale) 11. PERTINENZA Le statistiche ufficiali devono soddisfare le esigenze degli utenti 12. ACCURATEZZA E ATTENDIBILITÀ Le statistiche ufficiali devono rispecchiare la realtà in maniera accurata e attendibile 13. TEMPESTIVITÀ E PUNTUALITÀ Le statistiche ufficiali devono essere diffuse in maniera tempestiva e con puntualità 14. COERENZA E CONFRONTABILITÀ Le statistiche ufficiali devono essere intrinsecamente coerenti nel tempo e comparabili a livello territoriale; dovrebbe essere possibile combinare i dati correlati provenienti da fonti diverse e farne un uso congiunto 15. ACCESSIBILITÀ E CHIAREZZA Le statistiche ufficiali devono essere presentate in una forma chiara e comprensibile; essere diffuse in maniera conveniente e opportuna ed essere disponibili e accessibili con imparzialità, con i relativi metadati e le necessarie istruzioni 7
Online Survey Tools Effettuare indagini statistiche come mission aziendale o istituzionale #3/3 Le fasi dell indagine statistica 1. Progettazione dell indagine statistica a. Definizione del fenomeno oggetto di analisi b. Disegno dell indagine c. Scelta della tecnica di indagine d. Progettazione del questionario e. Valutazione preliminare dei tempi e dei costi f. Predisposizione di un sistema di controllo della qualità g. Stesura di un documento di progettazione h. Predisposizione e realizzazione delle sperimentazioni 2. Realizzazione dell indagine statistica a. Rilevazione delle informazioni b. Codifica delle risposte aperte c. Registrazione dei dati su supporto informatico 3. Elaborazione dei dati a. Revisione automatica b. Elaborazione dei risultati c. Validazione dell indagine 4. Presentazione dei risultati a. Diffusione via web 8
Orientare le strategie aziendali Cambio di paradigma, in particolare per le PMI (Market Democracy) (Traditional) 9
Condurre progetti di ricerca Le indagini sono uno strumento fondamentale per la raccolta di dati per progetti di ricerca, sopratutto nel campo sociologico, statistico e demografico Vengono generalmente condotte rispetto a popolazioni di riferimento molto specifiche (e numericamente limitate) Popolazione di riferimento: insieme di unità statistiche alle quali si intende estendere i risultati dell'indagine, es. residenti nel comune di Milano Indagini Panel (su un campione rappresentativo che resta immutato nel corso di sondaggi successivi) 10
Effettuare sondaggi e consultazioni pubbliche #1/2 Agenda Digitale Lombarda 2012-2015 2. Aree prioritarie di intervento 2.5. Cittadinanza digitale Partecipazione: intelligenza collettiva e la collaborazione tra istituzioni e cittadini nei processi decisionali con la finalità di migliorare la qualità delle scelte politico-amministrative degli enti pubblici, attraverso la proposta di interventi che siano effettivamente legati alle esigenze e necessità dei cittadini 4. Modalità di coinvolgimento degli stakeholder e piano di comunicazione Target: Consumer / Business Sondaggi / Questionari / Form online 11
Effettuare sondaggi e consultazioni pubbliche #2/2 Agenda Digitale Lombarda Trend Analysis 9. Cittadinanza digitale Informazione consultazione partecipazione attiva E-Governance cooperazione fra stakeholders multicanalità diminuzione della distanza fra pubblico e privato crowdsourcing: «lavorare» alla causa comune 12
13 II. Modalità di raccolta dati
Perché utilizzare strumenti online Qualità Il questionario, se ben progettato, consente di raccogliere dati di qualità Costo I costi sono contenuti, soprattutto se paragonati ad una identica indagine cartacea, CAPI, CATI Tempestività La disponibilità dei dati per le opportune analisi è immediata Facilità Il questionario online consente di raccogliere grandi quantità di dati 14
Come lavorano gli strumenti online Tramite un apposito software, viene creato un set di domande e possibili risposte Vengono generate delle form Html che possono essere pubblicate su Internet (link) È possibile spedire via email o rendere pubblico il link tramite il quale i rispondenti possono accedere al questionario Tutte le risposte e (eventualmente) i dati del rispondente vengono memorizzati in un database 15
Principali tipologie di indagini online Da lista Viene mandata, a tutti i potenziali rispondenti, una email personalizzata con il link diretto al questionario; indagine non anonima Aperta a tutti Viene pubblicizzato il link diretto al questionario; indagine anonima Viene pubblicizzato un link che rimanda ad una pagina di registrazione per l identificazione univoca del rispondente; indagine non anonima Per le indagini non anonime, in genere, i software utilizzano come chiave l indirizzo di posta elettronica del rispondente 16
Principali criticità Sussistono notevoli strati di popolazione che non hanno dimestichezza con gli strumenti informatici Indagine complesse (es. statistica ufficiale) devono necessariamente essere multi canale La multi canalità richiede metodi e strumenti per l integrazione delle risposte Le indagini online dovrebbero poter essere visualizzate su diversi browser, su diversi s.o., su diverse piattaforme Per le indagini aperte (non da lista) sussistono notevoli problematiche statistiche (metodologiche) connesse alla definizione del campione e riporto all universo Una rilevazione online deve comunque essere progettata da uno statistico o esperto di indagini In linea di massima, un rilevazione diretta condotta da un rilevatore fornisce dati più accurati 17
I diversi approcci agli strumenti online Acquistare o scaricare un software open source da installare sui propri server totale controllo dell indagine e dati residenti sui propri server facilità di integrazione con i propri sistemi informatici bassa scalabilità dei sistemi al variare del numero di rispondenti (costo) costi, spesso nascosti, legati alla configurazione del sw, disponibilità H24 del sito, disaster recovery, backup, supporto sistemistico e DBA maggiore vulnerabilità ai sabotaggi / attacchi informatici esterni e interni Acquistare un servizio in modalità SaaS nessuna preoccupazione legata alla configurazione del sw e disponibilità del servizio e dei dati elevata scalabilità dei sistemi al variare del numero di rispondenti costi tendenzialmente bassi minore vulnerabilità ai sabotaggi / attacchi informatici totale dipendenza dal fornitore del servizio per la disponibilità del questionario e dei relativi dati difficoltà di integrazione con i propri sistemi informatici 18
III. Principali caratteristiche da prendere in considerazione 19
Progettazione dell indagine Disponibilità di template di indagini per le più comuni esigenze (question bank) Disponibilità di differenti tipologie di domande e risposte 20
Definizione del questionario 1/2 Possibilità di attivare regole di convalida delle risposte (es. il campo email deve contenere la @) Skip Logic - Possibilità di effettuare salti condizionali nella logica delle domande (es. rispondere alla domanda B solo se si è data una particolare risposta alla domanda A, saltare una intera sezione di domande se non si applicano al contesto del rispondente) Piping - Formulare le domande tenendo conto di risposte già date precedentemente (es. se ho risposto che ho la residenza a Roma, creare una domanda del tipo esprimi una valutazione sulla situazione del traffico a Roma ) Possibilità di combinare insieme Skip Logic e Piping 21
Definizione del questionario 2/2 Randomization - Possibilità di ordinare casualmente le domande per minimizzare l interferenza fra risposte contigue Possibilità di gestire Panel Gestione delle quote, ovvero chiusura dell indagine se viene raggiunto un determinato numero di risposte Gestione della data/ora di apertura e chiusura dell indagine Supporto di differenti lingue per la stessa indagine 22
Analisi dei dati Possibilità di effettuare analisi dei dati e reporting avanzato direttamente all interno del software di indagine Possibilità di esportare in dati in formato raw (.csv) o già formattati (Excel, R, SPSS, SAS) 23
Integrazione Possibilità di rispondere all indagine all interno delle piattaforme social (es. Facebook) Embedding - Possibilità di ospitare il questionario direttamente sul proprio sito Internet, senza rimandare ad un sito specializzato Possibilità di personalizzare il questionario con i propri brand, grafica, font e colori aziendali Possibilità di inserire audio e video nel questionario Disponibilità di API per la gestione dell indagine Facilità di condivisione dei risultati dell indagine fra interessati, nei social network, su Internet Possibilità di integrazione con DB esterni per l autenticazione degli utenti (es.ldap, Active Directory) o per il passaggio di dati all indagine (custom variables) 24
Tecnologie Sicurezza (crittografia) dei dati inerenti le indagini (informazioni sui rispondenti e risposte fornite) Sicurezza dei sistemi rispetto a sabotaggi / attacchi informatici interni ed esterni Scalabilità della piattaforma: rispetto al numero complessivo di rispondenti nell ambito dell intera durata della consultazione in ambito SaaS è sostanzialmente un problema di pricing rispetto al numero contemporaneo di rispondenti in un dato momento è sostanzialmente un problema informatico di tenuta dei server e dell applicativo Possibilità di eseguire il questionario su differenti browser (IE, Firefox, Chrome, etc.) e sistemi operativi (Win, Mac, Linux, Android, ecc.) e su diverse piattaforme (PC, tablet, smartphone, ecc.) Adattamento del layout dell indagine alle diverse piattaforme e utilizzo nativo della modalità touch 25
Una possibile griglia di valutazione Progettazione dell indagine Definizione del questionario Analisi dei dati Integrazione Tecnologie CARATTERISTICHE Disponibilità di template di indagini per le più comuni esigenze (question bank) Disponibilità di differenti tipologie di domande e risposte Possibilità di attivare regole di convalida delle risposte (es. il campo email deve contenere la @) Skip Logic - Possibilità di effettuare salti condizionali nella logica delle domande (es. rispondere alla domanda B solo se si è data una particolare risposta alla domanda A, saltare una intera sezione di domande se non si applicano al contesto del rispondente) Piping - Formulare le domande tenendo conto di risposte già date precedentemente (es. se ho risposto che ho la residenza a Roma, creare una domanda del tipo esprimi una valutazione sulla situazione del traffico a Roma ) Possibilità di combinare insieme Skip Logic e Piping Randomization - Possibilità di ordinare casualmente le domande per minimizzare l interferenza fra risposte contigue Possibilità di gestire Panel Gestione delle quote, ovvero chiusura dell indagine se viene raggiunto un determinato numero di risposte Gestione della data/ora di apertura e chiusura dell indagine Supporto di differenti lingue per la stessa indagine Possibilità di effettuare analisi dei dati e reporting avanzato direttamente all interno del software di indagine Possibilità di esportare in dati in formato raw (.csv) o già formattati (Excel, R, SPSS, SAS) Possibilità di rispondere all indagine all interno delle piattaforme social (es. Facebook) Embedding - Possibilità di ospitare il questionario direttamente sul proprio sito Internet, senza rimandare ad un sito specializzato Possibilità di personalizzare il questionario con i propri brand, grafica, font e colori aziendali Possibilità di inserire audio e video nel questionario Disponibilità di API per la gestione dell indagine Facilità di condivisione dei risultati dell indagine fra interessati, nei social network, su Internet Possibilità di integrazione con DB esterni per l autenticazione degli utenti (es.ldap, Active Directory) o per il passaggio di dati all indagine (custom variables) Sicurezza (crittografia) dei dati inerenti le indagini (informazioni sui rispondenti e risposte fornite) Sicurezza dei sistemi rispetto a sabotaggi / attacchi informatici interni ed esterni Scalabilità della piattaforma al variare del numero di rispondenti complessivi e in un dato istante Possibilità di eseguire il questionario su differenti browser (IE, Firefox, Chrome, etc.) e sistemi operativi (Win, Mac, Linux, Android, ecc.) e su diverse piattaforme (PC, tablet, smartphone, ecc.) Adattamento del layout dell indagine alle diverse piattaforme e utilizzo nativo della modalità touch Prod. A Prod. B 26
Altra griglia di valutazione (analitica) http://www.ghislandiweb.it/survey/survey_tab.htm (i dati non sono aggiornati) 27
28 IV. Gli strumenti più diffusi
Google Trends 29
Google Forms (Drive) http://drive.google.com K = 0 Rispondenti =? 30
Limesurvey http://www.limesurvey.org K = 0 200 Rispondenti = 5000 31
Survey Monkey (+ Zoomerang) http://it.surveymonkey.com K = 0 800 /anno Rispondenti = EU 32
SurveyGizmo http://www.surveygizmo.com K = 810 $/anno Rispondenti =? 33
PollDaddy http://www.polldaddy.com K = 0 899 $/anno Rispondenti = EU 34
QuestionPro http://www.questionpro.com K = 0 990 $/anno Rispondenti = 35
Survs http://www.survs.com K = 0 1190 $/anno Rispondenti = 36
Key Survey http://www.keysurvey.com K =? Rispondenti = 250000? 37
Qualtrics http://www.qualtrics.com K =? Rispondenti =? 38