Welcome to Linux 0.99pl10. > hackin structure e la 3d camera dei segreti

Transcript

1 Note Autore: Emiliano Daddario. Licenza Creative Commons Attribuzione-Non commerciale-no opere derivate 3.0 Italia. Per chiedere licenze diverse contattare su lookatscreen.tk Emiliano Daddario. Talk realizzato ed eseguito con L Y X e Lubuntu al Linux Day di Roma il 26 ottobre Look@tScreen è un sistema software client-server altamente sperimentale e innovativo, perciò provvisoriamente solo il client è Linux, mentre è stato usato nei 5 minuti di demo a fine talk un server scritto in Kinect for Window$ SDK. L obiettivo è portare il server in Linux entro il 2014.

2 Welcome to Linux 0.99pl10. > hackin structure e la 3d camera dei segreti login: emiliano daddario password: linux day 2013_

3 ~ # whoami_ > emiliano ~ # whatis_ > look@tscreen (1) - 3 a hackathon whymca ~ # whereis_ > codemotion: /roma/2013

4 ~ # io e linux_ > linaro dal 2000 svago/ studio/docenza/lavoro vivrei a ponte linari > smanettone infedele, utente fedele ubuntu, webos, cyanogenmod, ff os > < 3 aria, sage, node.js

5 ~ # whois marco bertola_ > c++ dev presso n-track > beta tester IRCAM > utente software open

6 ~ # about us_ > suonatori di kinect al mastersuono mis > youtu.be/8wfp4hwzdvs > youtu.be/-xy9ltcs0ug > docenti mastersuono mis

7 ~ # volete del codice_ public class Ciao { public static void main(string[] args) { try { System.exit(0); } finally { System.out.println("Ciao"); } } } // adattato da java puzzlers puzzle 4

8 ~ # terza legge di clarke_ > tecnologia = magia > mantello invisibilità di harry potter youtu.be/4qhxq_1cqjg

9 ~ # cosa può fare il kinect?_ > sacrilegi: calciare tux youtu.be/fj_zjqzavlg > fare e portare caffè youtu.be/b4e1uc3cbps

10 ~ # e di non inutile?_ > pubblicazione audinect navigatore per ciechi ijhci vol. 4 ed > output device per ciechi > pc per sala operatoria > consultare lastre in ar

11 ~ # navigatore per ciechi_

12 ~ # e di non inutile?_ > robotica > fitness, allenamento > telemedicina >...look@tscreen

13 ~ # mappa di profondità_

14 ~ # scanner time-of-flight_ > range gated imager: 3dv systems zcam > phase shift: canesta canestavision > d=t/(2 c)

15 ~ # scanner structured-light_ > kinect 1g_ > triangolazione flic.kr/p/6gkdn3 > pattern flic.kr/p/95rqxf

16 ~ # cosa li accomuna?_ > micro$oft

17 ~ # slide compensativa :-) > driver linux open: freenect di h. m. cantero, 10/11/10 (storia ow.ly/eetgj) > crea un movimento sw: cl nui, roborealm, openni, kinect for window$, evoluce...

18 ~ # whatis structure_ > primo scanner 3d mobile

19 ~ # formato open_ > stl meshlab linux_

20 ~ # software open_ > sdk per linux > driver per openni > demo open_

21 ~ # hardware open_ > file cad per stampa 3d del supporto plastico_

22 ~ # structure: potenzialità_ > youtu.be/wgp4l93yzh8 > localizzare viso e altre parti del corpo > orientazione del capo > app di 3 parti: p. es. hand tracking con algoritmo k-curvature

23 ~ # algoritmo k-curvature_

24 ~ # whatis look@tscreen_ > rilevatore di sguardo > 1.0: window$ + osc + linux > 2.0: basta solo linux > (not) better with kinect > better without window$

25 > pubblicità ~ # look@tscreen apps_ > allarme colpi di sonno > diagnosi autismo, ictus ow.ly/qbymn > smart scroll / stay / pause / rotation youtu.be/ft5yjwvmeeq

26 ~ # look@tscreen 1_ > m$ sdk: angoli roll, pitch, yaw testa > server window$ osc client linux > formula trasforma gli angoli in x,y schermo

27 ~ # look@tscreen 2: testa_ > fotocamera rgb > ofxfacetracker (libreria c++ open per openframeworks)

28 > occhiali non richiesti ~ # look@tscreen 2: occhi_ > pupil tracking: v. pubblicazione combining kalman filtering and mean shift for real time eye tracking under active ir illumination

29 ~ # look@tscreen hardware_ > idea per sensore open: a ogni frame si alternano due gruppi di led ir > frame dark pupil si alternano a frame bright pupil > come in eyewriter 2

30 ~ # non è una 3d camera_ > sostituisce la 3d cam usata in look@tscreen1 > potrà integrarne una > sensore di movimento di occhi e testa > uso simile alle 3d cam

31 ~ # look@tscreen2 e linux_ > un hw con ir attivo è complesso ma può semplificare il sw > userà librerie di cv e algebra open: opencv... > controller led userà linux + arduino (o bbb)

32 ~ # linux apps potenziali_ > alcune di quelle su COGAIN ow.ly/qc0gg > automazione input con xdotool

33 ~ # intro al talk di marco_ > le magie dei suonatori di kinect

34 ~ # q-nect music quartet_

35 ~ # q-nect uniroma2_

36 ~ # linux day 2011 terni_

37 ~ # linux day 2011 terni_

38 ~ # linux day 2011 terni_

39 ~ # linux day 2011 terni_

40 ~ # seeinteracting sound_

41 ~ # seeinteracting sound_

42 ~ # seeinteracting sound_

43 ~ # seeinteracting sound_

44 ~ # cambi di coordinate_

45 ~ # algo. winding number_

46 ~ # ringraziamenti_