Copyright 2015 SPS All Rights Reserved. Progetto Crowdtesting

Transcript

1 Progetto Crowdtesting

2 Agenda Contesto di riferimento Approccio Soluzione Organizzazione Contatti

3 Contesto di riferimento Crowdsourcing come metodo Il crowdsourcing è un nuovo modello di business aziendale con cui un impresa affida la progettazione, la realizzazione o lo sviluppo di un progetto, un idea o un bene immateriale ad un insieme indefinito di persone (dall inglese crowd, folla). Si tratta quindi di una forma di esternalizzazione delle attività, resa possibile dalla diffusione di internet: il meccanismo è infatti basato sull esistenza di portali on-line che organizzano delle open call presentate alla community di iscritti. La community vede: da un lato volontari, intenditori del settore e freelance, interessati ad offrire i propri servizi sul mercato globale, e dall altro le aziende (grandi marchi, piccole e medie imprese, startup) che intendono affidare all esterno parte delle proprie attività. Il crowdsourcing come modello di esternalizzazione è un argomento molto interessante per le startup: è strettamente connesso alle tecnologie digitali, è basato sulla filosofia open source e può rappresentare un metodo di recruiting veloce ed economico che consente alle aziende di incontrare un gran numero di potenziali collaboratori. Si tratta inoltre di un mercato in fase di crescita in Italia, che può offrire possibilità non solo sotto forma di nascita di nuovi portali ma anche con lo sviluppo di app per il crowdsourcing.

4 Contesto di riferimento Crowdsourcing come metodo Il crowdsourcing oggi viene utilizzato come metodo di raccolta di informazioni spesso per fini statistici o di ricerca. Questo metodo, sfruttando strumenti di collaboration 2.0 e social networking, richiede la partecipazione degli utenti che, nell era della rivoluzione digitale, sono ben lieti di partecipare liberamente a queste attività. Dal mese di Marzo 2011 Facebook lancia l applicazione per creare sondaggi. Gli utenti di Facebook a Gennaio 2011 ammontavano a 600 milioni, oggi sono 1 miliardo. Il 24 Aprile 2012 Google lancia Google Drive fornendo strumenti di collaboration 2.0

5 Contesto di riferimento Definizione di Crowdtesting Crowdsource testing e una nuova metodologia nel processo di testing delle applicazioni software che si attua affidando prototipi e prodotti a gruppi di persone a livello globale piuttosto che effettuare il test in laboratorio. Il Crowdsource testing permette di avere a disposizione un grande numero di persone contemporaneamente, generalmente a costi inferiori rispetto alle metodologie utilizzate fino ad oggi, e con un risultato di qualità nettamente superiore.

6 Contesto di riferimento Definizione di Crowdtesting Crowdsourced Testing, meglio conosciuto come Crowdtesting, è quindi: Un metodo per testare il software basato sul concetto di Croudsourcing (da crowd = folla ) I test vengono eseguiti da testers residenti in centinaia di paesi diversi appartenenti a continenti diversi I Testers non fanno parte di alcuna azienda in qualità di impiegati o consulenti, ma sono parte di una Community La maggior parte delle piattaforme di test contemplano un architettura Cloud based I Testers sono generalmente retribuiti per Bug I Test vengono eseguiti su piattaforme reali e quindi i risultati ottenuti sono molto piu consistenti ed affidabili rispetto a quelli ottenuti in laboratorio

7 Contesto di riferimento Outsourcing vs Crowdtesting Outsourcing Crowdtesting Risorse full time e team dedicato (Rigid Workforce ) Persone utilizzate e dedicate solo a fronte di esigenza ( Flexible Workforce ) Difficoltà nella copertura di tutte le tipologie di devices e piattaforme Potenzialmente disponibilità di copertura per qualsiasi tipo di device e piattaforma Difficoltà nella Localization di mercati differenti (Local) Massima flessibilità nella localization (Global) Difficoltà nella copertura oraria 24/7 Estrema copertura oraria sempre 24/7 Presenza costi fissi a volte elevati Nessun overhead in termini di costi

8 Contesto di riferimento Crowdtesting ROI La tabella sottostante delinea le caratteristiche ed i benefici di alto livello di un approccio crowdtesting rispetto a quello in-house o a modelli di outsourcing tradizionale.

9 Contesto di riferimento Crowdtesting Trend Mercato Negli ultimi anni, Information Technology (IT) ha assunto un importanza strategica e molte aziende hanno fatto notevoli investimenti in ERP, CRM e altre applicazioni aziendali, come siti web e applicazioni mobili (app) che dovrebbero avere non solo un buon design, ma anche ininterrotta funzionalità. Il crowdsourcing aiuta a raggiungere una elevata probabilità di accettazione dei consumatori del software e garantisce che il software sia privo di difetti in percentuale maggiore rispetto al test in-house.

10 Contesto di riferimento Crowdtesting Interesse nel mondo L interesse del Crouwdsourcing nel mondo.

11 Contesto di riferimento Crowdtesting Fattori di successo e Fattori di criticità Fattori di Successo Fattori di Criticità Flessibilità nella formazione del test Flessibilità del modello di pricing Possibilità di avere un test internazionale Community di esperti motivata Tester non influenzati dal contesto societario Velocità nell esecuzione del test Report immediato o in tempo reale Il test non richiede spostamenti fisici L investimento economico produce risultati a lungo termine Ricerca e sperimentazione Gestione di un organizzazione professionale che garantisca e verifichi il livello di copertura dei test effettuati. Gestione e garanzia della qualità della tester s community (skill, preparazione, competenza) Business model adeguati al mercato Gestione h 24 SPS attraverso una gestione integrata dell intero processo, permetterà di risolvere tali fattori di criticità.

12 Agenda Contesto di riferimento Approccio Soluzione Organizzazione Contatti

13 Approccio La nostra Partnership SPS ha studiato diverse soluzioni e valutato diversi partner per estendere il portafoglio dei servizi offerti all approccio del crowdsourced testing, o più brevemente crowdtesting, affiancandolo le modalità tradizionali di test (test funzionali, alfa test, beta test, etc.). La scelta è stata quella di fare una partnership con i leader di mercato nel settore. La Community di riferimento garantisce, insieme alla nostra presenza professionale sul territorio italiano, il superamento di limiti del crowdtesting (professionalità, affidabilità dei tester e loro governo attivo). La partnership consente quindi di accrescere il livello qualitativo dell offerta di crowdtesting: garantendo la presenza, nelle fasi di analisi, PM e consuntivazione di personale esperto italiano e, di norma, skillato sulle tematiche specifiche; di interfacciare il PMO della community di riferimento superando problemi di cultura, normative nazionali specifiche, orario e di linguaggio; garantendo, nel caso di rapporti che vanno oltre il singolo collaudo, la costituzione di un team esperto.

14 Approccio Caratteristiche Tester Decennale esperienza nel QA Assurance Gestisce la piu grande community di tester esistente Offre un gruppo di specialisti del collaudo, di PMO, che in una prima fase studiano con il cliente la sua esigenza (attività ovviamente gratuita) e definiscono il tipo di intervento più consono per la complessità e il grado di solidità della/delle applicazioni dell azienda Tutti i tester sono iscritti alla Community e hanno fornito esperienze, skill, certificazioni I dati dei tester sono a disposizione del cliente che in casi di applicazioni complesse puo richiedere di scegliere i tester in base ad una pre-selezione, che fornirà, dati anagrafici, esperienze, competenze, skill,.. Il cliente puo richiedere che ogni tester sottoscriva un NDA L ingaggio di un certo team di tester puo essere programmato Si prevede sempre una fase iniziale di training del tester

15 Approccio Numero Tester Italia Attualmente la Società di Crowdtesting possiede diversi TESTER in Italia

16 Approccio Fasi del Crowdtesting Preparazione Inizializazione Esecuzione Valutazione Completamento Identificazione necessità del cliente Definizione Piano di Progetto Selezione e preparazione crowd testers Project Team Setup Preparazione ambiente di test Definizione deliverables di progetto (test case, dashboard, report, video) Start attività di testing Monitoring puntuale del testing Forum a disposizione di tester e cliente Supporto continuo del PM alla community dei tester Review intermedie (SAL) di progetto con community e cliente Validazione preliminare risultati Preparazione deliverablesdi reporting Feedback form dei tester Presentazione risultati al cliente Valutazione crowd tester (customer survey)

17 Agenda Contesto di riferimento Approccio Soluzione Organizzazione Contatti

18 Soluzione Perché la nostra Alleanza Strategica Il crowdtesting si sta diffondendo ormai da qualche anno e tra le iniziative di crowdsourcing è sicuramente una di quelle che meglio può sfruttare le potenzialità del cwowd. Con il crowdtesting sicuramente si hanno dei vantaggi in termini di: riduzione tempi di esecuzione, completezza dei testing (completezza di device, sistemi operativi utilizzati su smartphone e desktop), riduzione dei costi di collaudo molto significativi. Le risorse delle community di crowdtesting sono tante, sono disponibili (sfruttando anche i fusi orari 24 ore al giorno, sabato e domenica inclusi), costano poco per la mancanza di un rapporto contrattuale definito e continuativo. Il collaudo effettuato in crowdtesting è essenzialmente un collaudo di usability con copertura dei diversi device di fruizione altrimenti non ottenibile, in tempi paragonabili, in organizzazioni tradizionali.

19 Soluzione Perché la nostra Alleanza Strategica L azienda leader sul tema crowdtesting che ha investito oltre 30 milioni di dollari nella costituzione della community e dei sistemi di reclutamento, gestione, report del collaudo ha intuito per prima i limiti della soluzione crowdtesting nuda cambiando approccio. L Azienda di Crowdtesting tende a creare un rapporto duraturo con il cliente che va oltre il singolo collaudo; si creano così degli specialisti della tematica che gestiscono il collaudo ora di usability, ora di localizzazione, ora funzionale, etc utilizzando di volta in volta meglio la community. Community a cui partecipano risorse selezionate, che forniscono all azienda un NDAgreement, che sono assortite per il singolo test secondo le esigenze specifiche/competenze necessarie; in generale è l Azienda di Crowdtesting che risponde del risultato e non una community (a volte queste community, sono manifestazioni spontanee non strettamente coordinate e garantite da un Azienda). FUNCTIONAL TEST EXPERT LOCALIZATION TEST EXPERT SECURITY TEST EXPERT USABILITY TEST EXPERT LOAD TEST EXPERT

20 Soluzione Benefici Assicurati Il Crowdtesting è l unica soluzione che, affiancata al processo di test e collaudo tradizionale, può assicurare di: Massimizzare la copertura di device e sistemi operativi (praticamente illimitata); Fornire una capacità di individuazione degli errori e delle problematiche (di contenuto, di design, di carico) circa 8-10 volte superior ai test di laboratorio; Garantire una occupazione temporale della fase di test inferiore del 50% rispetto ai test in laboratorio; Offrire un servizio completo a costi inferiori di circa 30%-50% rispetto ai costi dei test in laboratorio.

21 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing La società di crowdtesting prescelta e l unica società di crowdtesting in grado di supportare le aziende nel testing durante tutto il ciclo di vita dell applicazione FUNCTIONAL TESTING La tua applicazione funziona nelle mani del tuo cliente finale? USABILITY TESTING La tua applicazione e effettivamnete cosi facile ed intuitiva da usare? LOCALIZATION TESTING La tua applicazione e appropriata al paese in cui vuoi commercializzarla? LOAD TESTING La tua applicazione e in grado di gestire lo stress del mondo reale? SECURITY TESTING La tua applicazione protegge correttamente i dati dei tuoi clienti?

22 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing - Functional FUNCTIONAL TESTING La tua applicazione funziona nelle mani del tuo cliente finale?

23 Exploratory Testing Test Case Execution Test Automation Scripting Soluzione Servizi di Testing - Functional Le applicazioni vincenti funzionano in ogni istante, in ogni luogo, e per chiunque. Una cosa assolutamnete importante e che tu devi essere sicuro che la tua applicazione funziona nelle mani del tuo cliente cosi come funziona quando la usi tu nel tuo laboratorio. La nostra società di crowdtesting e l unica azienda che e in grado di effetuare per te e con te questo tipo di test. Sfruttare la creatività della più grande comunità mondiale di tester professionisti che scopre difetti non individuati dai test case Verificare le funzionalità core attraverso una gamma completa di: dispositivi sedi copertura completa da parte della società di crowdtesting Creare i tuoi test cases sfruttando i tool e la metodologia della società di crowdtesting e quindi in maniera piu veloce e piu conveniente

24 Servizi di Testing Functional Cosa potrai avere oltre al risultato del test 1. Project Manager della società di crowdtesting Ogni cliente viene asseganto ad un PM per aiutarti ad entrare nei processi della società di crowdtesting. Il tuo PM ti fornirà supporto ed informazioni cosi come gestirà tutto il processo funzionale. I functional test con la società di crowdtesting includono la gestione dei tester, la realizzazione di un documento di scope, ed un assessment iniziale. 2. Real-Time Issue Reporting La società di crowdtesting prevede di fornire anche una reportistica real time su quanto sta avvenendo ed i risultati ottenuti. La società di crowdtesting e anche in grado di integrare questo real time reporting con i piu diffusi sistemi di issue reporting conosciuti. 3. Information sulla punta delle dita.. Sappiamo che tu e le tue persone siete carichi di lavoro ma avete anche bisogno di essere sempre aggiornati. La società di crowdtesting ha realizzato una dashboard che ti fornisce tutti gli ultimi aggiornamenti sull andamento dei test. 4. Il tuo team allargato.. Il team della società di crowdtesting diventerà un estensione del tuo team. Tu saprai in ogni momento chi sta testando la tua applicazione e potrai chattare con lui/lei e anche discutere direttamnete eventuali anomalie riscontrate e riportate nel issue report. On top a tutto questo la società di crowdtesting ti da anche la possibilità di ri-testare un anomalia riscontrata dopo che riterrai di averla corretta per verificare che effettivamente non ci sia piu il malfunzionamneto.

25 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing - Usability USABILITY TESTING La tua applicazione e effettivamnete cosi facile ed intuitiva da usare?

26 Expert-led Usability Surveys Expert Audits Narrated Captures Soluzione Servizi di Testing - Usability La miglior tecnologia e qualcosa di inuitivo. Ma la povera user experience puo distruggere la tua applicazione e rovinare la reputazione della tua azienda sul mercato. Come puoi sapere se il layout che hai deciso o il workflow del tuo processo soddisfano le esigenze e/o aspettative del tuo cliente? La società di crowdtesting e la sua community possono aiutarti anche in questo. Utilizzo di un gruppo di tester specifici per l applicazione selezionati all interno della nostra community Utilizzo di un esperto di test di usabilità che fornirà anche le sue reccommendat ions a fronte di profonda esperienza nel settore di mercato e utilizzo di best practices. Mettersi nei panni dei tuoi utenti per vedere il risultato della loro esperienza sul tuo prodotto

27 Soluzione Usability Test Cosa potrai avere oltre al risultato del test 1. I partecipanti di cui hai bisogno La società di crowdtesting ha una community globale presente in 150 paesi ed e in grado di matchare esattamente I tuoi clienti con I suoi tester per farti ottenere la piu alta qualità della tua applicazione. 2. A Usability Expert Trovare il perfetto esperto in casa e molto difficile. Questo e il motivo per cui la società di crowdtesting ha esperti di usability test molto competenti e disponibile a fornire una consulenza senza problema di dove sei nel tuo processo di sviluppo dell applicazione. 3. Comprehensive Usability Report Infine riceverai un report omnicomprensivo di tutto il test contenente anche I feedback ricevuti dai tester, opinioni di esperti in materia suggerimenti sui prossimi passi da effettuare.

28 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing - Localization LOCALIZATION TESTING La tua applicazione e appropriata al paese in cui vuoi commercializzarla?

29 Translation Testing Localization Testing Internationalization Testing Soluzione Servizi di Testing - Localization Localization testing, su base paese, nel tuo mercato target, e il modo migliore per assicurarti che la tua applicazione sia intuitiva, comprensibile, corretta per le persone che la dovranno usare. ll formato, il linguaggio, i caratteri, l idioma, e altri numerosi fattori verranno tenuti in considerazione ed utilizzati in questa fase. Traduzione realizzata da persone madrelingua e residenti nel paese target. Evita incomprensioni ed errori di utilizzo vocaboli. Una piattaforma deve essere di facile utilizzo per il paese di riferimento. Questo include formati e cultura da rispettare. Unico mezzo per raggiungere un mercato più globale possibile.

30 Servizi di Testing Localization Cosa potrai avere oltre al risultato del test 1. Partecipanti nel luogo dove tu ne hai bisogno Testare un applicazione negli Stati Uniti quando i tuoi clienti la utilizzeranno in Germania non e appropriato. La società di crowdtesting ti garantisce che effettuerà questa tipologia di test esattamnete nel mercato che e il tuo target. 2. Peace of Mind Un servizio di traduzione non sempre e la soluzione corretta. Un tester nativo del luogo dove devi lanciare la tua applicazione e in grado di suggerire frasi, simboli, parole, e forme piu corrette o piu immediate per i tuoi clienti finali.

31 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing - Load LOAD TESTING La tua applicazione e in grado di gestire lo stress del mondo reale?

32 Scalable Load Testing Load Script Creation Expert Analysis Soluzione Servizi di Testing - Load C e una strana cosa nell economia dei prodotti digitali: troppo successo! E il tuo cliente incontra un problema di lentezza o di crash puo succedere che abbandoni la tua applicazione per usarne una di un tuo competitor. La società di crowdtesting ti offre un set di servizi per testare il carico sulle applicazioni ed essere sicuri che la tua reggerà il tuo miglio giorno! Utilizzo di un gruppo di tester in modalità scalabile e flessibile per testare i colli di bottiglia in termini di performance della soluzione. Utilizzo di script realizzati dagli esperti della community per simulare ulteriore carico di lavoro. Analisi dei risultati ottenuti e fornitura di un report che conterrà anche indicazioni su come indirizzare eventuali criticità rilevate.

33 Servizi di Testing Load Cosa potrai avere oltre al risultato del test 1. On-Demand Load La nostra soluzione basata sul cloud prevede una scalabilità nell eseguire i test on-demand. Ed inoltre ti fornirà un report che evidenzierà i risultati dei test di performance e soprattutto suggerimenti su come risolvere eventuali problemi. 2. Custom Script Creation I nostri performance engineers sono in grado di preparare custom load scripts per enfatizzare il carico di lavoro sulle features e le funzionalità che ci aspettiamo saranno le piu utilizzate dai tuoi clienti. Tali script verranno addirittura consegnati a te che potrai riutilizzzarli a tuo piacimento.

34 TIPOLOGIA INTERVENTO Soluzione Servizi di Testing - Security SECURITY TESTING La tua applicazione protegge correttamente i dati dei tuoi clienti?

35 Security Experts Expert Risk Assessment Actionable Remediation Plan Soluzione Servizi di Testing - Security Mantenere le informazioni ed i dati del cliente sicuri e protetti e una priorità di qualsiasi azienda. Sfortunatamente nuove vulnerabilità vengono scoperte ogni giorno ed e quasi impossibile gestirle tutte. Questa e la ragione per cui e praticamnete impossibile testare la sicurezza delle tue applicazioni con i toll standard che abbiamo nei laboratori. Gli esperti di sicurezza della società di crowdtesting utilizzeranno tutta la loro capacità per scoprire ogni possibile vulnerabilità che potrebbe costarti tempo, soldi e reputazione. Fase iniziale di Assessment in cui esperti di sicurezza definiranno insieme al cliente un piano di azione. Fase di test effettiva e preparazione di un docuemnto di Risk assessment. Fase finale di consegna risultati e linee guida da parte di esperti per la risoluzione delle anomalie riscontrate (mitigation plan).

36 Servizi di Testing Security Cosa potrai avere oltre al risultato del test 1. Top Security Experts La società di crowdtesting e in grado di fornire il supporto di Top security expert per ogni tipo di applicazione. Inoltre si possono mescolare esperti a seconda delle esigenze: lavorare con esperti di mobile per un nuovo grande lancio e poi con esperti di web app per testare un importante aggiornamneto sul tuo web backend. 2. Esperti Project Manager Eseguire un security test e probabilmnete qualcosa che non fai tutti i giorni e questa e la ragione per cui ti affianchiamo un esperto project manager per definire e concordare con te tutto il da farsi. Il tuo PM lavorerà con te per capire quali sono i reali bisogni di test, gestire tutto il processo di test ed assicurarsi che tu otterrai il risultato che ti aspetti. 3. Risultato immediato, sicuro, privato Il risultato dei tuoi security testing e immediatamnete disponibile sulla nostra piattaforma non appena qualcosa viene scoperto. Puoi inoltre essere certo che i tuoi risultati non saranno mai visti da nessun altro che non sia tu, le persone del tuo team ed il tuo PM. 4. On-Demand Security Testing Testare la sicurezza della tua applicazione ogni volta che vuoi. Effettuare il test prima di un lancio importante oppure un focus su uno specifico componente dopo un aggiornamneto del software. Siamo in grado di metterti a disposizione i nostri esperti ogni volta che ne hai bisogno.

37 Soluzione Dashboard Controllare e monitorare continuamente le tue applicazioni in fase di collaudo e/o in produzione e un esigenza di tutti. La Dashboard e un applicazione facile da utilizzare che lavora come il tuo workflow per mostrarti quando ne hai bisogno tutte le informazioni che ti servono sulla tua applicazione.

38 Soluzione Enterprise Croudtesting La soluzione proposta da SPS SOCIETA DI CROWDTESTING permette quindi di unire un organizzazione dedicata e territoriale, una professionalità certificata ed una standardizzazione dell attività dei tester e del monitoraggio. Gestione con il supporto di un Program Manager certificato ORGANIZZAZIONE Single point contact Offerta «Croud Management» Tester con esperienza provata PROFESSIONALITA Sistema di Rating che consente la corrispondenza tra skill e device di fruizione Molti tester sono impiegati IT full-time Stessi processi, maggior qualità per progetto STANDARDIZZAZIONE Realizzazione Report Possibilità di re-use dei testers favoriti

39 Agenda Contesto di riferimento Approccio Soluzione Organizzazione Contatti

40 Organizzazione Project Organization La Struttura di Progetto è stata progettata per soddisfare i requisiti di progetto e garantire un adeguato coinvolgimento delle parti interessate. Client Lead Drive direction of overall project Project Management (Senior QA Supervisors) Manage timelines, cost and issues (SOCIETA DI CROWDTESTING & SPS) INTERNAL Testers Community 5 10 Crowdtesters Selezione dei tester in base alle esigenze del cliente, in base ai loro skill Il Client sa di poter contare su tester specifici con caratteristiche specificatamente richieste in fase di assessment (anche per diversi test) EXTERNAL Testers Community Crowdtesters (di cui 35 tester italiani) Selezione dei tester in base alle esigenze del cliente, in base ai loro skill

41 Agenda Contesto di riferimento Approccio Soluzione Organizzazione Contatti

42 Contatti SPS srl Viale Bramante Fiumicino