Liquid Crowd. Prof. Silvana Castano Dott. Lorenzo Genta Prof. Stefano Montanelli Prof. Alfio Ferrara. The ISLab team

Dimensione: px

Iniziare la visualizzazioe della pagina:

Download "Liquid Crowd. Prof. Silvana Castano Dott. Lorenzo Genta Prof. Stefano Montanelli Prof. Alfio Ferrara. The ISLab team"

Gaspare Baroni
7 anni fa
Visualizzazioni

1 Liquid Crowd The ISLab team Prof. Silvana Castano Dott. Lorenzo Genta Prof. Stefano Montanelli Prof. Alfio Ferrara Dipartimento di Informatica Università degli Studi di Milano

2 Cos è il crowdsourcing? Da Wikipedia: Il crowdsourcing (da crowd, folla, e outsourcing, esternalizzare una parte delle proprie attività) è un modello di business nel quale un azienda o un istituzione affida la progettazione, la realizzazione o lo sviluppo di un progetto, oggetto o idea ad un insieme indefinito di persone non organizzate in una comunità preesistente 2

3 Problemi aperti Le tecniche di crowdsourcing soffrono di due limiti principali: Come valutare la qualità del lavoro svolto? Non tutti gli utenti hanno la medesima competenza nello svolgere i compiti assegnati e può capitare che la scarsa accuratezza di (pochi) lavoratori comprometta la qualità dell intero risultato Come premiare in modo adeguato i lavoratori più abili e volenterosi? i meccanismi premiali incentivano i lavoratori nello svolgimento delle attività assegnate 3

4 Liquid Crowd Liquid Crowd è un framework di crowdsourcing che, utilizzando la nozione di consenso tra i lavoratori, offre due funzionalità peculiari: I compiti (task) svolti dai lavoratori sono automaticamente validati dai lavoratori stessi I lavoratori ottengono un punteggio che viene utilizzato come metro di valutazione delle attività svolte 4

5 Liquid Crowd La nozione di singolo lavoratore viene sostituito dalla nozione di gruppo di lavoratori Il gruppo svolge un lavoro che è considerato valido solo se condiviso dalla maggioranza dei componenti del gruppo Un lavoratore riceve un punto per ogni lavoro effettuato SOLO quando il gruppo raggiunge il consenso sulla risposta data 5

6 Liquid Crowd - Punteggi Un compito (task) si considera svolto quando sono pervenute al sistema le risposte di tutti i lavoratori del gruppo Il punteggio di un lavoratore considera esclusivamente i task svolti Un singolo lavoratore ha 10 minuti di tempo per completare il task assegnato Il consenso può essere calcolato solo quando tutti i lavoratori del gruppo hanno completato il task 6

7 Il problema - SimAthletes Utilizziamo Liquid Crowd per svolgere il seguente lavoro (nel seguito denominato caso di studio SimAthletes): Abbiamo un insieme di personaggi famosi, ognuno caratterizzato da proprietà di vario genere Vogliamo valutare il livello di similarità di questi personaggi in base alle proprietà considerate (problema di matching di similarità) 7

8 Il problema - SimAthletes In particolare, date le descrizioni di due individui con relative proprietà, il lavoratore dovrà valutare quanto le due descrizioni siano simili 8

9 Suggerimento La similarità tra due individui non deve essere calcolata in maniera meccanica (es. gli individui hanno una sola proprietà in comune, quindi sono poco simili). Piuttosto, si tenti di cogliere quale può essere la risposta corretta per «senso comune». In tal modo la probabilità di raggiungere il consenso (e quindi di aumentare il proprio punteggio) sarà più elevata 9

10 Il sistema Argo Argo è un prototipo software basato sul framework Liquid Crowd Funzionamento: Il lavoratore richiede l assegnazione di un nuovo task Ogni volta che un task viene completato il sistema ne propone uno nuovo (l utente può decidere in ogni momento di interrompere l assegnazione di nuovi task) Se non si è in grado di eseguire il task è possibile rifiutarlo Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 10

11 Accedere ad Argo Argo consente l accesso solo agli utenti registrati Eseguire la registrazione fornendo i dati richiesti (i dati memorizzati saranno utilizzati solamente per scopi statistici) Scelta dello username: Scelto dall utente: accesso mediante password inserita in fase di registrazione unimi (nome.congome@studenti.unimi.it): accesso mediante password di ateneo Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 11

12 Se do la risposta sbagliata? Non esistono risposte corrette o sbagliate! Tutto quello che conta è che le risposte siano inserite in maniera ragionata e non casuale. Più saranno le risposte nelle quali si ottiene il consenso e più alto sarà il punteggio dell utente. Tentare di dare il maggior numero possibile di risposte in poco tempo non è una buona strategia: in questo modo si avrà una bassa probabilità di ottenere il consenso Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 12

13 Il meccanismo premiale Argo costruisce una graduatoria dei lavoratori in base al punteggio ottenuto nei task Come indicato a lezione, è previsto un meccanismo premiale nell ambito del corso di basi di dati per i top-5 lavoratori in base al punteggio Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 13

14 Tempi di lavoro Il caso di studio SimAthletes sarà operativo fino alla fine di giovedì 29/11/2013 Alla scadenza saranno resi noti i risultati e i nominativi dei top-5 lavoratori Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 14

15 Link Piattaforma sofware Argo Pagina facebook per segnalazione errori/problemi Gruppo ISLab Gestione delle Liquid Informazioni Crowd e Web 15

Documenti analoghi

SHAREPOINT 2013 ESERCITAZIONE BAT PUGLIA 2017 REGISTRAZIONE/ABILITAZIONE/ACCESSO

SHAREPOINT 2013 ESERCITAZIONE BAT PUGLIA 2017 REGISTRAZIONE/ABILITAZIONE/ACCESSO Sommario Sommario... 2 1 Introduzione... 3 2 Primo accesso al sito... 4 3 Registrazione utente del Dipartimento Protezione