Streaming Tool per CoFFEE

Transcript

1 Streaming Tool per CoFFEE a cura di Gerardo Lombardo CoFFEE Cooperative Face-to-Face Educational Environment Groupware Suite di applicazioni distribuite (in LAN) per il problem solving collaborativo in ambito didattico Framework per lo sviluppo di nuove applicazioni collaborative CSCW Computer Supported Collaborative Workgroup 1

2 F2F - Face-to-Face CoFFEE Piattaforma software adattabile e configurabile su vari livelli (UC Tailorability) Basata su Eclipse RCP (Rich Client Platform) Java component-based framework Comunicazione di rete basata su ECF (Eclipse Communication Framework) Plug-in ed extension-points 2

3 CoFFEE - alcune definizioni CoFFEE Session: sequenza di uno o più passi(steps), ognuno con un proprio obiettivo (pedagogico) Step: interazione con uno o più tool collaborativi (classroom step / group step) Tool: componente software (plug-in) client-server che fornisce una determinata funzionalità o servizio(es. Threaded Discussion tool) CoFFEE - applicazioni base Session Editor: utilizzato dal docente per definire le sessioni Controller (o Session Player): utilizzato dal docente per l esecuzione ed il controllo delle sessioni Discusser (o Session Client ): utilizzato dagli studenti per partecipare alla sessione 3

4 Streaming Tool CoFFEE tool che fornisce funzionalità di streaming audio/video, in particolare: VOD Streaming: riproduzione e controllo sincronizzati tra client e server di video in formato FLV o audio in formato MP3 selezionati dal docente Live Streaming: acquisizione di audio e video dalla webcam (o altra periferica di acquisizione audio/video compatibile con flash) del docente o studente, quindi loro pubblicazione e riproduzione coordinati tra client e server Remote Streaming Opening Remote Streaming Opening: riproduzione di streaming remoti (VOD o Live) provenienti da una CoFFEE Session differente 4

5 Streaming Tool - screenshot Streaming Tool - screenshot 5

6 Streaming Tool - considerazioni La video-conferenza (o in generale lo streaming) è principalmente una forma di interazione remota. L introduzione dello streaming in ambiente collaborativo Face2Face produce differenti scenari di sessione Alcuni Scenari - VOD Streaming - Controllo Playback sincronizzato e shared-seeking 6

7 Alcuni Scenari - Live Streaming Con un software di simulazione webcam (ad es. SplitCam) ognuno può mostrare il proprio desktop - Live Streaming dalla webcam del docente oppure di uno studente Alcuni Scenari - Live Streaming - Anche VOD Streaming (eventuali perdite di sincronizzazione) 7

8 Alcuni Scenari - VOD Streaming Streaming Tool - architettura 8

9 Streaming Tool - tecnologie CoFFEE Framework Java, Eclipse RCP ed ECF per implementare la GUI ed il servizio di rete dello Streaming Tool Tecnologia Flash per lo streaming Client-side: Adobe Flash Player Server-side: Red5 Flash Server ActionScript: linguaggio di scripting Flash Microsoft OLE /COM ed ActiveX-Control per embedding e controllo del Flash Player in un plug-in per Eclipse Tecnologie - CoFFEE Framework Ogni tool è formato da due componenti (Eclipse plug-in): client e server Extension-point pattern: plug-in lato server e lato client estendono rispettivamente il Session Player ed il Session Client secondo lo schema tools Ogni plug-in (client o server) deve implementare quattro classi fondamentali: LEADPlugin (plug-in life cycle) LEADService (communication shared object) LEADToolUI (SWT Composite per GUI) LEADTool (GUI e Shared Object life cycle) 9

10 Streaming Tool struttura del tool Streaming Tool - tecnologie COM - Component Object Model : definisce le modalità di dichiarazione e accesso di metodi e proprietà di una applicazione riutilizzabile - Location Transparency: l applicazione che incorpora è un client che accede a metodi e proprietà dell applicazione incorporata(binary object) Le applicazioni vengono riutilizzate o incorporate in due principali tipi di oggetti: OLE - Object Linking and Embedding ActiveX Control Active extension Control 10

11 Streaming Tool - tecnologie SWT COM Library: set di package per lavorare con oggetti COM. - inclusa nella versione Windows della libreria grafica SWT (Standard Widgets Tools) - SWT è la libreria grafica che utilizza Eclipse RCP Il Flash Player all interno dello Streaming Tool è un oggetto ActiveX Control (in SWT un OleControlSite) Streaming Tool - tecnologie FlashPlayer Composite: classe che implementa un widget grafico SWT (Composite) per la riproduzione e gestione di video in formato FLV o audio in formato MP3 tramite Flash Player StreamingPlayer.swf: animazione Flash(in AS2) che funge da player multimediale per la riproduzione e pubblicazione di streaming su Flash server Espone interfacce invocabili tramite ActiveX Control Notifica gli eventi di streaming in fase di playback 11

12 Tecnologie ActionScript Linguaggio di scripting object oriented per il controllo di animazioni Flash Gestione sequenze di frame e/o animazioni Gestione di connessioni e richiesta servizi a Flash server tramite l oggetto NetConnection Pubblicazione e riproduzione di streaming tramite l oggetto NetStream Definizione di External Interface invocabili tramite ActiveX Control (ma non solo, ad es. anche da JavaScript) Invio di messaggi e comandi dall animazione verso il proprio host container(ad es.activex Control) con il metodo fscommand() XML wrapping per i dati scambiati da e per il container Tecnologie Red5 Open Source Flash Server (L-GPL) Scritto in Java (disponibile su Windows, Linux e Mac) Basato sui framework Spring ed Apache MINA Reverse Engineering o Discovery through observation? Funzionalità: Streaming Audio/Video Pubblicazione (Publish) di live streaming da client Registrazione (Record) degli streaming pubblicati dai client Shared Object (centralizzati/persistenti/locali ) Sviluppo di applicazioni remote con Servlet e/o Beans (Spring), ma anche con Python, Ruby e Flex 12

13 Tecnologie Red5 RTMP - Real Time Messaging Protocol Protocollo proprietario Adobe basato su connessioni TCP(porta 1935) oppure su HTTP tunneling (RTMP-T porta 80 opp. 8080) Gestione trasporto dati streaming, shared object e invocazione metodi remoti Lo Streaming Tool per CoFFEE esegue Red5 sulla macchina che ospita il Controller e ne utilizza: Streaming (Play, Publish, Record) Shared Object per sincronizzazione streaming Streaming Tool - tecnologie StreamingController: classe che implementa la logica di controllo per lo Streaming Tool Utilizza un listener degli eventi/messaggi lanciati dallo StreamingPlayer Invoca i metodi esposti dallo StreamingPlayer Le operazioni di coordinazione e sincronizzazione degli streaming tra client e server vengono gestite tramite scambio di StreamingControlMessage su ECF shared object(classe StreamingService) e su Red5 shared object 13

14 Streaming Tool Schema Dettagliato Streaming Tool Questioni tecniche Flash player Embedding/Interaction Playback sincronizzato Live Streaming da WebCam Gestione LateComers basata su Timestamp... 14

15 Streaming Tool Playback Start Riferimenti WWW: