Linguaggio e affordances

Транскрипт

1 Linguaggio e affordances Uno studio sugli eventi di presa Irene De Felice ILC CNR

2 Affordances: pattern motori incorporati nella rappresentazione dell'oggetto che sono in grado di influenzare azioni successive (e.g. Ellis and Tucker 2000; Grèzes et al. 2003)

3 Affording parts Orientation effect (tra gli altri, Buccino et al. 2009; Grèzes et al. 2003; Phillips and Ward 2002; Symes et al. 2007; Tucker and Ellis 1998) E' possibile che tali fenomeni si riflettano anche in compiti esclusivamente linguistici?

4 Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini

5 Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili

6 Irene De Felice Raccolta dei dati Partecipanti: 30 volontari Stimoli visivi: 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans

7

8 Irene De Felice Raccolta dei dati Partecipanti: 30 volontari Stimoli visivi: 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part

9 Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part Orientamento - destra/sinistra; diritto/rovesciato

10 Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part Orientamento - destra/sinistra; diritto/rovesciato Compito: Descrivi nella maniera più dettagliata possibile come prenderesti gli oggetti rappresentati

11 Trascrizione in CHAT Linguistica (main tier) + gestuale (action coffee cup (overturned) *007: questa la prenderei / sempre / mettendo la mano / *007: come se dovessi afferrare una pallina // %act: G11 RH *IDF: mhmh// Riga di testo in trascrizione ortografica Breaks prosodici terminali/non terminali (Cresti, Moneglia 2005; Moneglia, Cresti 2006)

12 Trascrizione in CHAT Linguistica (main tier) + gestuale (action coffee cup (overturned) *007: questa la prenderei / sempre / mettendo la mano / *007: come se dovessi afferrare una pallina // %act: G11 RH *IDF: mhmh// Tassonomia GRASP (Feix et al., 2009) -> The "Human Grasping Database" Grasp 11 (power sphere grasp), right hand (da

13 Analisi linguistica *007: questa la prenderei / invece / mettendo la mano nel manichino // Target Effettore

14 Analisi linguistica Mass Effettore Natural Artifact Artifact with AP Human % 20% 40% 60% 80% 100% Target Spostamento di attenzione dal soggetto (effettore) verso l'oggetto (target) ogni qualvolta lo stimolo visivo rappresenti un oggetto con affording parts

15 Analisi delle descrizioni fornite *007: questa la prenderei / invece / mettendo la mano nel manichino // *007: questa la prenderei / invece / mettendo la mano qui così // %act: G24, RH EFFETTORE: MANO DESTRA TARGET: MANICO Tip pinch

16 Analisi delle descrizioni fornite Presa a una mano diretta sul target (HANDLE) Presa a una mano indifferenziata (ONE HAND)

17 References Borghi, A. M. and Riggio, L. (2009). Sentence comprehension and simulation of object temporary, canonical and stable affordances. Brain Research 1253, pp Buccino, G., Sato, M., Cattaneo, L., Rodà, F. and Riggio, L. (2009). Broken affordances, broken objects: a TMS study. Neuropsychologia 47, pp Cresti, E. and Moneglia, M. (a cura di) (2005). C-ORAL-ROM. Integra- ted Reference Corpora for Spoken Romance Languages. John Benjamins Publishing Company, Amsterdam. Cresti, E. and Moneglia, M. (a cura di) (2005). C-ORAL-ROM. Integra- ted Reference Corpora for Spoken Romance Languages. John Benjamins Publishing Company, Amsterdam. Ellis, R. and Tucker, M. (2000). Micro-affordance: the potentiation of components of action by seen objects. British Journal of Psychology 91(4), pp Feix, T., Pawlik, R., Schmiedmayer, H., Romero, J. and Kragic, D. (2009). A comprehensive grasp taxonomy. In Robotics, Science and Systems: Workshop on Understanding the Human Hand for Advancing Robotic Manipulation. Disponibile all'indirizzo: Grèzes, J., Tucker, M., Armony, J., Ellis, R. and Passingham, R. (2003). Objects automatically potentiate action: an fmri study of implicit processing. European Journal of Neuroscience 17, pp MacWhinney, B. (2000). The CHILDES Project: Tools for Analyzing Talk. Lawrence Erlbaum Associates.

18 References Moneglia M. and Cresti E. (2006). C-ORAL-ROM Prosodic boundaries for spontaneous speech analysis. In Kawaguchi Y. Zaima, S. Takagaki, T. (eds.), Spoken Language Corpus and Linguistics Informatics, Amsterdam: Benjamins. Phillips, J. C. and Ward, R. (2002). S-R correspondence effects of irrelevant visual affordance: Time course and specificity of response activation. Visual Cognition 9, pp Symes, E., Ellis, R. and Tucker, M. (2007). Visual object affordances: object orientation. Acta Psychologica 124(2), pp The "Human Grasping Database", disponibile all'indirizo: Tucker, M., Ellis, R. (1998). On the relation between seen objects and components of potential actions. Journal of Experimental Psychology 24, pp Tucker, M. and Ellis, R. (2004). Action priming by briefly presented actions. Acta Psychologica 116, pp