초록

본 연구의 목적은 구어동반 제스처가 어휘인출과정의 개념화와 어휘화 가운데 어떠한 단계와 관계가 있는지를 알아보고자 하는 것이다. 제스처와 발화 분석을 위하여, 모 방송국의 TV 버라이어티 프로그램 중 제시된 목표단어의 의미를 설명하여 전화상대방이 그 단어의 이름을 맞추게 하는 게임의 동영상 자료를 이용하였다. 분석자료로 이와 같은 TV 자료를 선택한 이유는 프로그램의 게임과제가 어휘인출의 개념화 과정과 어휘화 과정을 동시에 유도할 수 있는 과제로 판단되었기 때문이다. 20회의 동영상 자료를 재생하여 목표단어와 목표단어 설명과정에서 출연자들이 산출한 발화를 전사하고, 출연자들이 사용한 제스처를 어휘 제스처(lexical gesture)와 운동 제스처(motor gesture)로 구분하여 기록하였다. 구어동반 제스처가 어휘인출과정의 개념화와 관계가 있는지 알아보기 위하여, 구체적 단어와 추상적 단어 설명 시 동반된 제스처의 사용양상이 다른지, 그리고 단어 개념의 난이도와 제스처 양 사이에 상관관계가 있는지 분석하였다. 제스처가 어휘인출과정의 어휘화와 관계가 있는지 알아보기 위하여, 출연자가 목표단어 설명 시 산출한 발화의 단어 양과 제스처 양, 그리고 저빈도어 비율과 제스처 양 사이의 상관관계를 각각 살펴보았다. 연구결과 단어 개념의 심상성(imageability)에 따라 유의하게 많이 동반되는 제스처가 다르다는 것을 알 수 있었다. 즉 구체적 단어 설명 시에는 추상적 단어 설명 시보다 어휘 제스처가 유의하게 많이 동반되었고, 추상적 단어 설명 시에는 구체적 단어 설명 시보다 운동 제스처가 유의하게 많이 동반되었다. 또한 구체적 단어의 경우 개념의 난이도와 제스처 양 사이에 유의한 상관관계가 있었다. 그러나 목표단어 설명 시 산출된 발화의 단어 양과 제스처 양, 저빈도어 비율과 제스처 양 사이에는 상관관계가 나타나지 않았다. 본 연구의 결과는 구어동반 제스처가 어휘인출과정의 개념화부를 반영한다는 것을 시사한다. 뿐만 아니라 이제까지 많은 연구들에서 간과되어 왔던 운동 제스처의 기능에 대한 새로운 접근을 시도하였다는 점에서 본 연구는 의의가 있을 것이다.

키워드

어휘인출, 개념화, 어휘화, 구어동반 제스처, 어휘 제스처, 운동 제스처

참고문헌(47)open

  1. [학술지] Carlomagno, S / 2005 / Coverbal gestures in Alzheimer’s type dementia / Cortex 41 : 535 ~ 546

  2. [학술지] Kendon, A / 1994 / Do gestures communicate / A review. Research on language and social interaction 27 : 175 ~ 200

  3. [단행본] de Ruiter, J / 1998 / Gesture and speech production / Wageningen: Max Plank Institute

  4. [학술지] Krauss, R. M / 1996 / Nonverbal behavior and nonverbal communication: What do conversational hand gestures tell us / Advances in Experimental Social Psychology 28 : 389 ~ 450

  5. [학술지] McNeill, D / 1985 / So do you think gesture are nonverbal / Psychological Review 92 : 350 ~ 371

  6. [단행본] Levelt, W. J. M / 1989 / Speaking-From intention to articulation / Cambridge, MA: MIT Press

  7. [단행본] Kita, S / 2000 / How representational gestures help speaking in Gesture and language / Cambridge, UK: Cambridge University Press

  8. [단행본] Krauss, R. M / 2001 / The role of speech-related arm/hand gestures in word retrieval in Gesture, speech and sign / Oxford: Oxford University Press

  9. [학술지] Morsella, E / 2004 / The role of gestures in spatial working memory and speech / American Journal of Psychology 117 : 411 ~ 424

  10. [학술지] Rauscher, F / 1996 / Speech and lexical access: The role of lexical movements in speech production / Psychological Science 7 : 226 ~ 231

  11. [학술지] Levelt, W. J. M / 1999 / A theory of lexical access in speech production / Behavioral and Brain Sciences 22 : 1 ~ 75

  12. [학술지] Packman, A / 2001 / Stuttering and lexical retrieval / Clinical Linguistics & Phonetics 15 : 487 ~ 498

  13. [학술지] Alibali, M. W / 2000 / Gesture and the process of speech production: We think, therefore we gesture / Language and Cognitive Process 15 : 593 ~ 613

  14. [학술지] Alibali, M. W / 1993 / Transitions in concept acquisition: Using the hand to read the mind / Psychological Review 100 : 279 ~ 297

  15. [학술대회] Hostetter, A. B / 2004 / On the tip of the mind: Gesture as a key to conceptualization / Proceedings of the 26th annual meeting of the cognitive science society. Mahwah, NJ

  16. [학술지] Pine, K. J / 2004 / More gestures than answers: Children learning about balance / Developmental Psychology 40 : 1059 ~ 1067

  17. [단행본] Butterworth, B / 1978 / Gesture and silence as indicators of planning in speech in Recent advances in the psychology of language / New York: Plenum

  18. [학술지] Morrel-Samuels, P / 1992 / Word familiarity predicts temporal asynchrony of hand gestures and speech / Journal of Experimental Psychology: Learning, Memory and Cognition 18 : 615 ~ 622

  19. [학술지] Frick-Horbury, D / 1998 / The effects of restricting hand gesture production on lexical retrieval and free recall / American Journal of Psychology 111 : 43 ~ 62

  20. [학술지] Beattie, G / 1999 / An experimental investigation of the role of iconic gestures in lexical access using tip-of-the tongue phenomenon / British Journal of Psychology 90 : 35 ~ 56

  21. [학술대회] Finlayson, S / 2003 / Effects of the restriction of hand gestures on disfluency / Proceedings of Diss, Disfluency in Spontaneous Speech Workshop, 2003. Göteborg University, Sweden

  22. [단행본] Rime, B / 1991 / Gesture and speech in Fundamentals of nonverbal behaviour / Cambridge, UK: Cambridge University Press

  23. [단행본] Wingate, M / 1988 / The structure of stuttering. A psycholinguistic analysis / New York: Springer Verlag

  24. [학술지] Au-Yeung, J / 2001 / Non-word reading, lexical retrieval and stuttering: Comments on Packman, Onslow, Coombes and Goodwin / Clinical Linguistics & Phonetics 16 : 287 ~ 293

  25. [학술지] Packman, A / 2001 / Stuttering and lexical retrieval / Clinical Linguistics & Phonetics 15 : 487 ~ 498

  26. [단행본] McNeill, D / 1990 / Speech and gesture in Cerebral control of speech and limb movements / North Holland: Elsevier

  27. [학술지] Hadar, U / 1989 / Two types of gesture and their role in speech production / Journal of Language and Social Psychology 8 : 221 ~ 228

  28. [학술지] Krauss, R. M / 1995 / The communicative value of conversational hand gestures / Journal of Experimental Social Psychology 31 : 533 ~ 552

  29. [학술지] Ravizza, S / 2003 / Movement and lexical access: Do iconic gestures aid in retrieval / Psychonomic Bulletin & Review 10 : 610 ~ 615

  30. [단행본] McNeill, D / 1992 / Hand and mind: What gestures reveal about thought / Chicago: University of Chicago Press

  31. [학술지] Chieffi, S / 2007 / Are beats gestures unrelated to meaning of verbal production? Comment on Mizuguchi's view / Perceptual and Motor Skills 105 : 556 ~ 558

  32. [학술지] Rose, M / 2002 / The comparative effectiveness of gesture and verbal treatments for a specific phonologic naming impairment / Aphasiology 16 : 1001 ~ 1030

  33. [학위논문] 민승기 / 2002 / 한글단어 인지과정에서 구체성 효과

  34. [학술지] Wise, R. J. S / 2000 / Noun imageability and the temporal lobes / Neuropsychologia 38 : 985 ~ 994

  35. [학술지] Feyereisen, P / 1983 / Manual activity during speaking in aphasic subjects / International Journal of Psychology 18 : 545 ~ 556

  36. [학술지] Hadar, U / 1991 / Speech-related body movement in aphasia: Period analysis of upper arm and head movement / Brain and Language 41 : 339 ~ 366

  37. [학술대회] 민승기 / 2005 / 한국어 명사 어절 처리에서의 빈도효과 / 한국실험심리학회 겨울학술대회 발표논문집 : 79 ~ 83

  38. [학술대회] 민승기 / 2005 / 한국어 명사 어절의 처리과정 / 한국실험심리학회 겨울학술대회 발표논문집 : 145 ~ 150

  39. [학술대회] 임형욱 / 2003 / 한국어 용언과 체언어절의 형태소 정보처리 특성 / 한국인지과학회 춘계학술대회 발표논문집 : 192 ~ 194

  40. [학술지] Fiebach, C. J / 2003 / Processing concrete words: fMRI evidence against a specific right-hemisphere involvement / Neuropsychologia 42 : 62 ~ 70

  41. [기타] 서상규 / 1998 / 한국어 교육을 위한 기초어휘 선정 / 문화관광부 한국어 세계화 추진 위원회

  42. [학술지] Bull, P / 1985 / Body movement and emphasis in speech / Journal of Nonverbal Behavior 9 : 169 ~ 187

  43. [학술지] Theune, M / 2010 / To beat or not to beat: Beat gestures in direction giving / Lecture Notes in Computer Science 5934 : 195 ~ 206

  44. [학술지] Dittmann, A. T / 1969 / Body movement and speech rhythm in social conversation / Journal of Personality and Social Psychology 11 : 98 ~ 106

  45. [학술지] Ragsdale, J. D / 1982 / Distribution of kinetic hesitation phenomena in spontaneous speech / Language and Speech 25 : 185 ~ 190

  46. [단행본] Krauss, R. M / 2000 / Lexical gestures and lexical access: A process model in Language and gesture / Cambridge, UK: Cambridge University Press

  47. [단행본] McNeill, D / 2005 / Gesture and thought / Chicago, IL: The University of Chicago Press