Linguaggio e affordances Uno studio sugli eventi di presa Irene De Felice ILC CNR
Affordances: pattern motori incorporati nella rappresentazione dell'oggetto che sono in grado di influenzare azioni successive (e.g. Ellis and Tucker 2000; Grèzes et al. 2003)
Affording parts Orientation effect (tra gli altri, Buccino et al. 2009; Grèzes et al. 2003; Phillips and Ward 2002; Symes et al. 2007; Tucker and Ellis 1998) E' possibile che tali fenomeni si riflettano anche in compiti esclusivamente linguistici?
Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini
Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili
Irene De Felice Raccolta dei dati Partecipanti: 30 volontari Stimoli visivi: 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans
Irene De Felice Raccolta dei dati Partecipanti: 30 volontari Stimoli visivi: 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part
Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part Orientamento - destra/sinistra; diritto/rovesciato
Raccolta dei dati Partecipanti: Stimoli visivi: 30 volontari 42 immagini Oggetti rappresentati: 33 entità afferrabili Semantic type - artefacts, natural kinds, mass entities, humans Dimensione - grande/piccolo Con/senza affording part Orientamento - destra/sinistra; diritto/rovesciato Compito: Descrivi nella maniera più dettagliata possibile come prenderesti gli oggetti rappresentati
Trascrizione in CHAT Linguistica (main tier) + gestuale (action tier) @G: coffee cup (overturned) *007: questa la prenderei / sempre / mettendo la mano / *007: come se dovessi afferrare una pallina // %act: G11 RH *IDF: mhmh// Riga di testo in trascrizione ortografica Breaks prosodici terminali/non terminali (Cresti, Moneglia 2005; Moneglia, Cresti 2006)
Trascrizione in CHAT Linguistica (main tier) + gestuale (action tier) @G: coffee cup (overturned) *007: questa la prenderei / sempre / mettendo la mano / *007: come se dovessi afferrare una pallina // %act: G11 RH *IDF: mhmh// Tassonomia GRASP (Feix et al., 2009) -> The "Human Grasping Database" Grasp 11 (power sphere grasp), right hand (da http://grasp.xief.net/)
Analisi linguistica *007: questa la prenderei / invece / mettendo la mano nel manichino // Target Effettore
Analisi linguistica Mass 114 17 Effettore Natural 112 34 Artifact 214 112 Artifact with AP 510 578 Human 39 83 0% 20% 40% 60% 80% 100% Target Spostamento di attenzione dal soggetto (effettore) verso l'oggetto (target) ogni qualvolta lo stimolo visivo rappresenti un oggetto con affording parts
Analisi delle descrizioni fornite *007: questa la prenderei / invece / mettendo la mano nel manichino // *007: questa la prenderei / invece / mettendo la mano qui così // %act: G24, RH EFFETTORE: MANO DESTRA TARGET: MANICO Tip pinch
Analisi delle descrizioni fornite Presa a una mano diretta sul target (HANDLE) Presa a una mano indifferenziata (ONE HAND)
References Borghi, A. M. and Riggio, L. (2009). Sentence comprehension and simulation of object temporary, canonical and stable affordances. Brain Research 1253, pp.117-128. Buccino, G., Sato, M., Cattaneo, L., Rodà, F. and Riggio, L. (2009). Broken affordances, broken objects: a TMS study. Neuropsychologia 47, pp.3074-3078. Cresti, E. and Moneglia, M. (a cura di) (2005). C-ORAL-ROM. Integra- ted Reference Corpora for Spoken Romance Languages. John Benjamins Publishing Company, Amsterdam. Cresti, E. and Moneglia, M. (a cura di) (2005). C-ORAL-ROM. Integra- ted Reference Corpora for Spoken Romance Languages. John Benjamins Publishing Company, Amsterdam. Ellis, R. and Tucker, M. (2000). Micro-affordance: the potentiation of components of action by seen objects. British Journal of Psychology 91(4), pp.451 471. Feix, T., Pawlik, R., Schmiedmayer, H., Romero, J. and Kragic, D. (2009). A comprehensive grasp taxonomy. In Robotics, Science and Systems: Workshop on Understanding the Human Hand for Advancing Robotic Manipulation. Disponibile all'indirizzo: http://www.csc.kth.se/grasp/taxonomygrasp.pdf Grèzes, J., Tucker, M., Armony, J., Ellis, R. and Passingham, R. (2003). Objects automatically potentiate action: an fmri study of implicit processing. European Journal of Neuroscience 17, pp.2735-2740. MacWhinney, B. (2000). The CHILDES Project: Tools for Analyzing Talk. Lawrence Erlbaum Associates.
References Moneglia M. and Cresti E. (2006). C-ORAL-ROM Prosodic boundaries for spontaneous speech analysis. In Kawaguchi Y. Zaima, S. Takagaki, T. (eds.), Spoken Language Corpus and Linguistics Informatics, 89-114. Amsterdam: Benjamins. Phillips, J. C. and Ward, R. (2002). S-R correspondence effects of irrelevant visual affordance: Time course and specificity of response activation. Visual Cognition 9, pp.540-558. Symes, E., Ellis, R. and Tucker, M. (2007). Visual object affordances: object orientation. Acta Psychologica 124(2), pp.238 255. The "Human Grasping Database", disponibile all'indirizo: http://grasp.xief.net/ Tucker, M., Ellis, R. (1998). On the relation between seen objects and components of potential actions. Journal of Experimental Psychology 24, pp.830-846. Tucker, M. and Ellis, R. (2004). Action priming by briefly presented actions. Acta Psychologica 116, pp.185-203