시선추적을 활용한 청년층 및 노년층의 누구(who) 의문사처리 연구
Age-Related Differences in Sentence Processing of Who-Questions: An Eye-Tracking Study
Article information
Abstract
배경 및 목적
본 연구에서는 청년층과 노년층의 문장처리과제 수행력과 시선추적 데이터를 비교하고자 하였다.
방법
청년층 21명과 정상노년층 17명이 본 실험에 참가하였다. 모든 대상자는 선별검사에서 인지 및 언어검사를 통과하였고 집단 간 교육연수에서 차이가 없었다. 본 연구에서는 누구(who) 의문사에 결합하는 격조사를 주격조사(-가)와 목적격조사(-를) 두가지를 사용하여 문장처리과제를 두개의 유형으로 나눠 실험을 진행하였다. 대상자들은 화면에 제시되는 그림을 보며 이야기 및 질문을 들은 후 그에 맞는 답을 키보드로 눌렀고, 그 과정에서 시선추적 데이터가 기록되었다.
결과
과제수행에 있어서 정반응률에 대한 집단 차이가 유의하였다. 노년층이 ‘누구+를’ 유형에서 훨씬 낮은 수행력을 보였다. 다음으로 목표자극에 대한 총 시선고정시간에서 집단 간 차이는 유의하지 않았으나 모든 집단이 ‘누구+를’ 유형에서 시선고정시간이 짧았고, heat map을 통해서 노년층의 시선이 청년층에 비해 분산됨을 확인할 수 있었다. 또한, 시간구간에 따른 목표자극 시선고정비율에서 노년층이 문장의 마지막 구간에서 시선고정비율이 낮아짐을 보였다.
논의 및 결론
노년층이 청년층에 비해 ‘누구+를’ 유형에서 정반응률이 낮고 시선의 분산 정도가 강하게 나타났다. 나아가 문장의 마지막 구간에서 노년층의 시선고정비율 감소를 통해 노년층이 청년층에 비해 문장통합과정의 효율성이 저하됨을 추측할 수 있었다. 이러한 연구결과는 국내의 노년층을 대상으로 하는 문장처리연구에 기여하는데 의의가 있다.
Trans Abstract
Objectives
The purpose of this study was to compare the performance and eye tracking data of the young and the old in sentence processing tasks using the ‘who+nominative’ and ‘who+accusative’.
Methods
Participants in this study were 21 normal young adults and 17 normal elderly adults. All subjects passed the screening test for cognition and language, and there was no difference in education between the groups. Pictures and stories were presented at the same time, then subjects were asked to choose the corresponding answer on the screen.
Results
First, the accuracy of the elderly group was significantly lower than that of young group. The elderly group performed much lower in the type ‘who +accusative’. Second, there was no significant difference between the groups in fixation duration for the target stimulus, but all groups had lower fixation duration in the type of ‘who+accusative’. Also, the heat map shows that fixation of the elderly was more dispersed than the young group. Finally, the fixation proportion of the target stimulus according to the time interval showed that the fixation proportion of the elderly decreased in the last section of the sentence.
Conclusion
The elderly group showed lower accuracy and stronger gaze dispersion in ‘who+accusative’ type than the young group. Furthermore, the lower rate of fixation proportion for the elderly in the last section of the sentence is due to the lower efficiency of the sentence integration process compared to the young.
노화는 신체 전반에 변화를 불러 일으켜 인간의 기본적인 능력에 부정적 영향을 끼친다. 그 중에서도 노화는 인간의 언어 및 인지능력에 상당한 영향을 미친다(Kim & Oh, 2013). 예를 들어, 노화에 따라 노년층의 수용 및 표현 언어 능력이 청년층에 비해 저하되는 경향을 보인다(Thornton & Light, 2006). 또한, 구문 분석 및 해석능력 역시 노화에 따라 감소할 수 있고 이것은 작업기억과 같은 인지능력 및 인지처리와 연관되는 것으로 알려져 있다(Caplan, Dede, Waters, Michaud, & Tripodis, 2011). 그 중 작업기억 용량이론(working memory capacity theory)에 따르면, 통사적으로 복잡한 문장의 경우에 더 많은 작업기억 용량이 요구되고, 개인의 제한된 작업기업 용량에 기인하여 통사적 복잡성이 증가할수록 과제 수행력이 저하되는 것으로 보고된다(Just & Carpenter, 1992; Kemper & Kemtes, 1999). 문장처리에 있어서 의미적 처리와 통사적 처리가 중요한 부분임을 미뤄볼 때, 노화에 따른 인지처리능력 저하가 구문분석 및 의미해석능력 손상과 부적 상관관계가 있다는 다양한 연구들은 매우 중요한 의미를 가지며(Caplan et al., 2011; Kemper, Thompson & Marquis, 2001), 노화 및 인지처리와 관련된 문장이해능력 손상에 관한 연구는 다양한 통사적 구조를 활용하여 연구되고 있다(Just & Carpenter, 1992; Kemper & Kemtes, 1999; Caplan et al., 2011). 본 연구에서는 문장처리의 다양한 측면 중에서도 의문사 처리와 관련된 노화에 따른 영향을 살펴보고자 한다.
우리는 대화를 통해 상대방과 소통하는데, 그 대화속에서 질문을 이용하여 정보를 주고받으며 의사를 전달할 수 있다. 이렇듯 질문은 우리 대화에서 흔히 나타나는 기능이고 질문의 유형에서 가장 빈번하게 사용되는 문법적 지표가 ‘의문사’이다. 한국어의 대표적인 의문사로는 ‘누구(Who)’가 있으며, ‘누구’의 경우 격조사와 결합하여 문장에서 격을 취하게 된다. 즉, ‘누구’와 ‘가’라는 주격 조사와 결합된 형태인 ‘누가’의 경우, 문장 내에서 주격에 해당하는 내용을 질문하는 의문사의 역할을 하며, ‘를’이라는 목적격 조사와 결합한 형태인 ‘누구를’의 경우 목적격 내용을 물어보는 문법적 지표로 구현된다(National Institute of Korean Language, 2010). 누구(who) 의문사의 출현을 살펴보면, ‘누구(who)+가’의 형태가 ‘누구(who)+를’의 형태보다 그 능력이 먼저 발달하는 것으로 보고된다(Tyack & Ingram, 1977; Kim, 1997). 격조사가 한국어 처리에서 매우 중요한 역할을 하는 문법적 지표임을 감안할 때, 동일한 ‘누구(who)’ 의문사임에도 불구하고 그 뒤에 결합하는 격조사의 종류에 따라 문장 처리에 영향을 줄 수 있다는 측면을 주목할 필요가 있다. 격조사 사용은 두 낱말을 조합하는 시기부터 출현하고, 또래와 상호작용하는 영유아 시기인 만 2-3세 경에 발달하는 것으로 알려져 있다. 그런데, 아동의 격조사 발달 순서에서 주격조사가 목적격조사보다 더 빨리 출현하는 것으로 보고되고 있다(Lee, Lee, & Lee, 1997; Lee & Kwon, 1999; Pae, 1997). 따라서, 격조사가 의문사와 결합하였을 때 또한 ‘누구+가’의 형태가 ‘누구+를’보다 먼저 발달하는 것은 격조사 발달 순서와 일치하는 것으로 보인다.
‘누가’가 ‘누구를’보다 발달이 빠른 이유는 한국어 문장 어순의 규범성으로도 설명이 가능하다. 한국어는 동사 후치어로 주어+목적어+동사의 문장 어순이 규범 어순으로, 동사가 후치되는 어순이 유지되는 한, 비교적 자유로운 문장 어순을 가지고 있는 언어이다 (Sohn, 2006). 그럼에도 불구하고, 문장 어순의 규범성이 노화에 영향을 미친다는 연구는 다양하게 보고되었다(Sung, 2015a, 2015b, 2017; Sung, Yoo, Lee, & Eom, 2017). 이러한 어순 전형성을 의문사 격조사와 연결하여 살펴보면, ‘누가+누구를+동사’로 이루어진 문장에서 ‘누가’를 물어볼 경우, 문장의 주어에 위치한 명사구를 활성화하게 되어 ‘누구를’이라는 목적격 명사구를 물어보는 질문에 비해 규범성에 기반한 의문사 처리가 더 용이해질 수 있음을 예측할 수 있다. 반면 목적격 위치에 있는 ‘누구를’로 시작하는 의문문의 경우는, 목적어가 앞에 위치하는 비규범 어순으로 ‘누가’를 문두에서 물어보는 의문문에 비해 처리과정에서 부담이 증가할 수 있다. 하지만, 이러한 가설을 한국어 의문사와 격조사 결합 유형에 따라 노화와 연결하여 살펴본 연구는 전무한 실정이다.
영어권 Dickey & Thompson (2009) 연구에서 브로카 실어증 환자를 대상으로 ‘누구를(wh-)’ 의문사 질문에 대한 언어처리 능력을 연구하였다. 연구자는 대상자들에게 그림과 이야기를 동시에 들려준 후, 다시 동일한 그림을 보여주며 의문사 질문을 제시하고 그에 맞는 그림을 선택하게 하였다. 질문은 목적어를 찾는 능동 질문과, 피동 질문 두 가지로 진행되었다. 그 결과, 능동 목적격 질문에서 정상군의 정반응률이 100%인데 반해, 실어증 대상군의 정반응률은 36%로 매우 저조한 수행률을 보였다. 또한, 목적격 피동 질문에서 정상군의 정반응률이 90%, 실어증 대상군의 정반응률은 단지 20%에 그쳤다. Neuhaus와 Penke (2008) 연구에서는, 독일 실어증 환자들의 의문문 이해능력을 평가하였다. 그 결과, 독일 실어증 대상자들 역시 정상군에 비해 낮은 정반응률을 보였는데, 주어를 찾는 의문사 질문에 비해 목적어를 찾는 의문사 질문에서 더 낮은 정반응률을 보이는 것으로 나타났다. 한국의 경우, Park & Choi (2011)의 한국 브로카 실어증의 의문문 이해에 관한 연구가 있다. 해당 연구에서는 의문문 종류에 따른 이해능력 차이와 의문문 이해에서 어떠한 단서에 의존하는지를 살펴보았다. 연구 과제로 그림을 보여주며 의문사 질문을 한 후, 대상자가 직접 대답하거나 그림에서 고르도록 지시하였다. 연구 결과, 한국 브로카 실어증 환자들은 주격 질문(누가)에 비해 목적격 질문(누구를)에서 저조한 수행력을 보였다. 또한, 브로카 실어증 환자들은 문법적 단서 및 의미적 단서를 활용하는데 제한적이었지만 비교적 조사(case marker) 단서를 활용하는 것으로 나타났다. 즉, 동일한 의문사 사용 문장일 경우, 조사에 의존하여 해당 의미역을 찾는 것을 알 수 있다. 이처럼 한국 브로카 환자들 역시 주격 처리보다 목적격 처리에서 더 어려움을 보였고, 특히 의문사 이해에서 조사(case marker)는 의미역 찾기에 중요한 역할을 하는 것을 알 수 있다.
비록, 한국인 노년층 대상으로 하는 의문사처리 연구는 거의 없는 실정이지만, 한국의 의문사 사용빈도 연구를 통해 ‘누구’ 의문사의 중요성에 대한 근거를 찾을 수 있다. Chang (1988)에 따르면, 14만여 개의 어절로 구성된 코퍼스 중에 의문 체언- ‘누구류’에서 ‘누구’ 115개, ‘누가’ 54개, ‘누굴’ 3개로 보고된다. 즉, ‘누가’의 사용빈도가 ‘누굴(누구를)’에 비해 훨씬 많은 것을 알 수 있다. 이를 기반으로, 한국 정상 노년층을 대상으로 하여 ‘누구(who)’ 의문사의 격조사 유형에 따른 문장처리양상을 비교하는 연구가 필요한 실정이다.
문장 처리를 살펴보는 방법은 크게 문장 처리가 끝나는 지점(offline)에서 문장의 내용 및 문법적 오류에 대한 감별을 요구하는 과제로 평가하는 방법과, 문장이 제시되는 실시간 처리(real-time processing 또는 online processing)를 살펴보는 방법으로 나누어진다. 실시간 처리과정을 잘 살펴볼 수 있는 패러다임으로 대표적인 것이 시선추적(eye-tracking) 방식이다. 시선추적기(eye-tracker)는 대상자의 눈동자 움직임을 읽어주는 기계로, 시선이 머무는 지점 및 움직임과 그 시간을 기록하기 때문에 과제수행에서 대상자의 시선이 얼마만큼 자극에 머무는지를 추출할 수 있다. 따라서 안구 움직임은 그 사람의 지각 및 인지 활동의 중요한 지표가 되고 이를 통해 인간의 정보습득 과정을 측정할 수 있다(Rayner, 1998; Hyönä, Lorch Jr, & Kaakinen, 2002; Trueswell & Gleitman, 2007). 본 연구에서는 RED 방식을 이용하였는데, RED 방식은 컴퓨터, 텔레비전 등의 모니터에 시선추적장비를 부착시켜 대상자의 안구 위치와 반사광 위치를 파악하여 시선의 움직임을 측정하는 방식을 의미한다. 이 방식은 대상자의 신체에 장비를 부착하지 않는 비침습적 방법이라는 장점이 있다. 시선추적연구에서는 주로 시선고정시간(fixation duration), 시선고정시간 비율(fixation proportion), 시선고정횟수(fixation count) 등의 측정치를 사용한다. 시선고정시간이란, 자극에 시선이 머무는 시간을 의미하며 밀리세컨드(ms)로 기록된다. 시선고정시간 비율이란, 시선이 고정된 시간을 전체시간에 대한 비율로 나타낸 것을 의미한다. 시선고정시간은 보통 평균적으로 180-330 (ms) 범위에 머무는데, 사람에 따라 다양한 범위로 나타난다(Henderson & Pierce, 2008). 그런데 다양한 문헌에서 시선고정이 오래 일어날수록 그 처리 과정이 복잡한 것으로 보고되었다(Ashby, Ray-ner, & Clifton, 2005; Hutzler & Wimmer, 2004). 또한, 시선고정시간은 과제 유형에 따라 상이하게 나타날 수 있는데, 읽기에서보다 장면 인식에서 더 길다(Rayner, 2009). 즉, 시선고정시간의 범위는 다른 과제보다 시각적 처리에서 가장 크게 나타나는데 이것은 장면 인식에서 시선고정이 읽기에 비해 더 넓은 범위에서 오는 정보를 처리하기 때문이다.
이처럼 시선추적기는 과제 수행력 결과만으로는 알 수 없는 정보처리 상황을 유추하는 데 매우 효과적이고 유용한 방법이다. 현재까지 많은 시선추적을 활용한 연구는 주로 아동을 대상으로 하는 읽기 연구에서 많이 진행되어 왔으나 점차적으로 성인을 대상으로 하는 시선추적 연구가 늘어나는 추세이다. 또한, 읽기 과제 위주의 연구였던 과거와 달리 최근에는 청각적 과제를 포함한 문장처리과제를 사용한 연구가 진행되고 있다. Dickey 외(2007, 2009) 연구에서는 실어증 환자들을 대상으로 그림과 청각적 언어자극을 제시하고 의문사 질문을 통해 그에 따른 목표 그림을 고르는 시선추적 연구를 진행하였다. 그 결과, 문장이 제시되는 구간에서는 실어증 환자와 정상성인의 큰 차이가 없었으나, 문장이 제시되는 이후 구간(post-offset region)에서 실어증 환자의 시선고정비율이 증가하였다. 이는 실어증 환자의 문장처리 효율성이 정상성인에 비해 떨어지기 때문에 답을 결정(Decision making)하는 과정이 늦게 나타나는 것을 의미하고, 목표자극과 방해자극(distractor)을 구분하는 문장 처리에서 정상성인과 차이가 나는 것으로 해석할 수 있다. 한국에서도 시선추적을 활용한 노년층의 연구(Jo, 2019; Choi, 2019; Hwang, 2019)가 다양하게 진행되어 왔다. Jo (2019) 연구에서는, 노년층을 대상으로 단어제인 과제를 실시하였다. 그 결과, 노년층의 정반응률 및 반응속도가 청년층에 비해 유의하게 낮았다. 또한, 구간별 시선고정비율에서 노년층의 시선고정비율이 청년층에 비해 유의하게 낮았다. Hwang (2019) 연구에서는 의미역 과제를 이용하여 노년층과 청년층의 반응시간과 시선고정비율을 비교하였다. 그 결과, 의미역 예측 정도가 낮은 조건에서 노년층의 반응시간이 청년층에 비해 유의하게 감소되었다. 또한, 시선고정에 있어서 노년층의 시선고정비율이 청년층에 비해 낮은 것으로 나타났다. 이처럼 노년층의 언어처리에 대한 많은 시선추적 연구가 진행되었고, 시선추적 데이터를 통해 실시간 처리과정 비교가 가능하였다.
그러나 아직 의문사를 활용한 시선추적 문장처리 연구는 없는 실정이다. 따라서 본 연구에서는 의문사를 이용하여 노년층에게서 나타나는 문장처리 연구를 진행하고자 한다. 본 연구자는 의문사 중 일찍 발달하는 것으로 알려진 ‘누구’ 의문사를 본 연구과제에서 사용할 의문사로 선정하였고, 이를 Sung (2015a) 연구에서 정의한 규범성에 따라 의문사와 규범성을 연결지었다. 한국어에서 의문사는 의문사의 이동 여부에 영향을 받지 않는 특징을 가지기 때문에(Yoon & Kim, 2008), 의문사의 위치에 따른 문법적 오류는 발생하지 않는다. 이러한 이유에 근거하여 본 연구에서는 ‘누가’ 및 ‘누구를’ 의문사를 모두 문장의 맨 앞에 위치시켜 의문문을 구성한다. 즉, 본 연구자는 규범성 ‘누가’ 의문사 질문에서의 수행력과 비규범성 ‘누구를’ 의문사 질문에서의 수행력을 비교하고, 나아가 시선추적 데이터를 이용하여 시선고정시간(Fixation duration) 및 시선고정비율(Fixation proportion)과 같은 질적 양상을 비교하고자 하였다.
구체적인 연구 질문은 다음과 같다.
1) 누구(who) 의문사의 격조사 유형(-가/-를)에 따라 두 집단(청년층 vs. 노년층) 간 문장처리과제에서의 정반응률 차이가 유의한가?
2) 누구(who) 의문사의 격조사 유형(-가/-를)에 따라 두 집단(청년층 vs. 노년층) 간 문장처리과제에서의 시선고정시간(fixation duration) 차이가 유의한가?
3) 누구(who) 의문사의 격조사 유형별 구간에 따른 두 집단(청년층 vs. 노년층) 간 문장처리과제에서의 시선고정시간비율(fixation proportion) 차이가 유의한가?
연구방법
연구대상
본 연구의 대상은 청년 21명(남자 3명, 여자 18명)과 노년 17명(남자 3명, 여자 14명), 총 38명이다. 두 집단은 (1) 한국어를 모국어로 사용하고, (2) 건강선별기준(Christensen, Multhaup, Nordstrom, & Voss, 1991)에 근거한 기준에 따른 신경학적 및 정신적 병력이 보고되지 않으며, (3) 교육연수가 9년 이상이고, (4) 서울 및 인천, 경기도 지역에 거주하며, (5) 한국판 간이정신상태 검사(Korean-Mini Mental State Examination; K-MMSE, Kang, 2006) 점수가 연령 및 교육연수에 비해 16%ile 이상으로 정상 범위에 해당하고, (6) 자가보고(self-report)를 통한 시력 설문에서 이상이 없고, (7) 순음 청력검사에서 역치 50 dBHL 이하인 기준을 만족하였다. 청력검사 역치 기준은, 본 연구에서 사용하는 음성자극을 기준으로 하였다. 노년층에게는 추가로 언어기억검사(Seoul Verbal Learning Test; SVLT, Kang & Na, 2003)를 실시하며, 점수가 연령 및 교육연수에 비해 16%ile 이상의 정상범주에 해당하는 자를 선별하였다. 본 연구는 본교 연구윤리위원회(IRB)의 심의를 거쳐 위원회 승인하에 진행되었다(과제 승인번호 201909-0008-01). 청년층과 노년층 집단의 교육연수에서 통계적으로 유의한 차이가 나타나지 않았다(F(1,37)=2.131, p=0.163). 또한, 청년층과 노년층의 성별 비교를 위해 카이제곱 검정을 실시한 결과, 집단과 성별 간 분포 차이가 유의하지 않았다(p=.778).
연구에 참여한 대상자의 정보는 다음의 Table 1에 제시된 바와 같다.
Demographic information on participants
연구 과제
이야기 및 그림 자극
본 실험에는 선행연구인 Dickey 등(2009)의 패러다임을 한국어에 맞게 적용하여 과제를 개발하였다. 하나의 이야기는 3문장으로 구성된다. 첫 문장은 부사(어느 날), 주어1, 주어2, 장소, 서술동사(-있다)가 포함된 문장이다. 두 번째 문장은 주어, 목적어, 타동사로 구성되며, 행위자가 대상자에게 하는 행위가 설명된다. 마지막 문장은 방해문장으로, 부사(지금), 제3의 주어와 자동사, 지시어(고르세요)로 구성된다. 한 이야기 자극에 사용되는 모든 명사는 음절 수가 동일하며 첫 음소가 중복되지 않는 조건을 만족한다(예: 다람쥐(agent), 지렁이(theme), 놀이터(place), 까마귀(distractor)). 이야기 자극의 예시는 Table 2에 제시된 바와 같다. 음절 수와 음소에 대한 조건을 모두 만족시키는 서로 다른 이야기 24가지를 만드는 과정에서, 그림-어휘 연결 타당도 검증을 진행하였다. 이를 위해, 정상성인 12명에게 본 실험에 사용되는 어휘자극과 그림쌍을 제시하고 0점(매우 관련 없음)부터 4점(매우 관련 있음)까지 그림과 의미 관련성에 대해 5점 척도의 평가를 실시하였다. 그 중 3점 미만을 받은 8개의 항목은 새로운 그림으로 교체하여 2차 그림-어휘 연결 타당도를 진행하였고, 최종적으로 목표 자극 및 방해 자극 총 144개를 선정하였다. 본 실험의 이야기 자극은 총 36개(본 실험자극 24개 + filler 12개)이고, 각 이야기당 4개의 그림을 사용하여 총 144개의 그림을 사용하였다. 선행연구 (Dickey et al., 2009)와 동일하게, 그림 4장이 한 스크린 화면에 구성되며 각 그림은 컴퓨터 화면의 모서리에 한 개씩 배치된다. 그림자극의 예시는 Figure 1에 제시된 바와 같다. 다음으로, 이야기에 사용되는 모든 자동사와 타동사는 동아 새국어사전 제5판(Lee, 2004), 현대 국어 자동사 연구(Han, 2000) 및 국립국어원 표준대국어사전을 통해 확인작업을 거친 후에 선정하였고, 그 중 결과에 영향을 미칠 수 있는 타동사는 빈도수 100 이상의 고빈도 어휘(Seo, 1988)로 최종 선정하였다. 실험에 사용된 모든 이야기 및 질문 목록은 Appendix 1에 첨부하였다. 질문은 총 2가지 유형으로 나뉘는데, 통사적 구조의 통제를 위해 첫 음절에 부사 ‘지금’을 동일하게 배치하였다. 이것은 시선고정 결과추출 시 첫 구간에서 안정되지 않은 안구 움직임에 따른 데이터 손실을 방지하기 위함이다. 의문사(누가/누구를)는 문장에서 두 번째 어절에 동일하게 배치하여 질문 유형에 따른 통사구조의 차이가 없도록 하였다.
Example of the story and question stimuli
Example of picture stimuli.
모든 그림자극은 화면에 시작적으로 제시, 이야기자극 및 질문자극은 스피커를 통해 청각적으로 제시된다. 이야기자극은 그림자극과 동시에 제시되는데, 제시시간은 평균 10초이고, 질문자극 제시시간은 평균 4.1초이다. 실험자극 제시 순서는 연구절차에 더 자세하게 기술하였다.
자극 배열
이야기자극은 총 36개로, ‘누구를’ 유형에 대한 12가지, ‘누가’ 유형에 대한 12가지 그리고 filler 문항 12가지로 구성된다. 피험자가 실험을 미리 예상하여 연구결과가 왜곡되는 것을 방지하기 위해 매꿈질자극(Filler stimuli)을 배치하였는데, 필러는 목표 이야기 자극과 유사하게 구성하여 ‘어디(place)’, ‘왜(why)’, ‘언제(when)’를 묻는 형식으로 진행하였다. ‘누구+가’ 유형, ‘누구+를’ 유형, Filler의 비율은 1:1:1로 유사무선배치(pseudo-randomization)하였다. 또한, 대상자가 미리 문제 유형을 예측하는 것을 방지하기 위하여, 같은 유형이 연달아 2번 이상 나오지 않도록 구성하였다. 더불어, 목표자극(답)의 위치도 같은 위치에 2번 이상 연속하여 나오지 않도록 하였다.
연구 도구
음성 자극 및 녹음기기
음성 자극은 성인 여성의 목소리로 녹음되었다. 녹음은 방음시설이 갖춰진 조용한 실험실에서 진행하였고, 녹음기는 Sony사의 ICD-TX650을 사용하였으며 마이크와 입의 거리는 20 cm로 하여 녹음하였다. 문장의 읽기 속도는 Kwon, Kim, Choi, Na 그리고 Lee (1998)에 따른 3.45 (초)음절과 Shin과 Han (2003)에 따른 4.4 (초)음절의 중간값인 3.9 (초)로 조절하였다. 녹음된 음원은 Praat 프로그램을 이용하여 편집하였다.
모든 이야기 및 질문은 청각적으로 제시하였다.
시선추적기(Eye-tracker)
본 연구에서는 시선추적기를 이용하여 안구움직임 자료를 수집하였다. 안구추적기계는 SensoMotoric Instruments사의 모니터에 remote eye-tracking systems (RED)을 고정시켜 사용하였다. 시선추적기와 더불어, 시선추적기와 대상자의 눈 사이를 일정하게 유지하기 위해, 대상자의 얼굴을 고정시킬 수 있도록 턱 고정대(chin-rest)를 자체적으로 제작하여 사용하였다. 실험 설계는 SMI (Senso Motoric Instruments)사의 Experiment 3.7 프로그램을 이용하였고 분석을 위해서는 Begaze 3.7 프로그램을 사용하였다.
연구 절차
먼저, 대상자 개별 선별검사를 실시하였다. 선별검사에서는 인지 및 언어검사와 청력검사를 실시하였다. 그 후 본 실험을 진행하였고 실험은 소음이 통제된 쉴드룸 안에서 피험자 개별적으로 참여하는 방식으로 진행하였다. 피험자는 시선추적기가 설치된 컴퓨터 앞에 앉는데, 이때 안구의 움직임을 고정하기 위해 턱받침대에 얼굴을 고정하였다. 피험자가 턱을 받침대에 고정하면, 연구자는 그들에게 얼굴이 고정된 상태에서 안구만 움직이도록 지시하였다. 자세 고정이 끝나면, I view X 프로그램을 구동하여 안구운동이 잘 추적되고 있는지 사전 보정작업을 거쳤다. 보정단계 (calibration)는 대상자의 시선이 시선추적기가 허용하는 각도 범위 내에 있는지 맞추는 과정이다. 보정작업에서 동공의 최대편차가 X, Y축 모두 0.5 이하의 범위(Holmqvist et al., 2011) 내에 있음을 확인한 후 다음 단계로 넘어갔고 보정작업이 끝나면 바로 연습 문항을 실시하였다. 연구자는 대상자에게 ‘먼저 그림과 함께 이야기가 제공됩니다. 그 후, 삐 소리와 함께 그림이 잠시 사라집니다. 곧 동일한 그림이 제시되면서 이번에는 질문이 제시되는데, 질문을 주의 깊게 들으신 후 그에 맞는 답이라고 생각되는 그림을 키보드로 눌러주세요.’라는 지시사항을 들려주었다. 연습문제에서는 주어(subject) 찾기, 목적어(object) 찾기, 방해 자극(distractor) 찾기, 장소(place) 찾기 등을 묻는 질문 총 4회를 연습하였다. 대상자가 연습 문항에서 실험에 대해 완전히 이해가 완료되면, 본 문항을 실시하였다. 이때부터 연구자는 쉴드룸 밖에서 피험자의 수행을 관찰하였다.
실험의 단계는 다음과 같다. 1) 화면에 4개의 그림이 동시에 제시되면서, 청각적 이야기 자극이 함께 제시된다. 따라서 대상자는 그림을 보면서 이야기를 듣고, 질문에 대비하여 이야기를 기억하고 있어야 한다. 2)그 후, 삐- 소리와 함께 컴퓨터 화면에 있던 그림이 잠시 사라진다. 3) 동일한 그림들이 화면에 다시 제시됨과 동시에 질문자극이 청각적으로 제시된다. 이 단계에서 대상자는 질문을 듣고 그에 맞는 답을 키보드로 선택한다. 시선추적은 마지막 단계인 3단계에서만 실시된다. 즉, 질문을 듣고 답을 고르는 실시간 처리과정이 기록된다. 실험이 절반 진행되면 다시 한번 보정작업을 거치게 된다. 이때, 연구자는 피험자의 상태를 살피며 쉬는 시간을 가질지 확인한다. 피험자가 쉬는 시간을 원하는 경우 충분히 쉬는 시간을 가졌으며, 그렇지 않은 피험자의 경우 중간 보정단계를 진행한 후 바로 나머지 실험을 진행하였다.
실험 순서도는 Figure 2와 같다.
A display of experimental stimulus.
자료 분석
본 연구의 종속변수는 정반응률, 시선고정시간, 시선고정비율이다. 정반응률(Accuracy)은 Begaze3.7 프로그램을 이용하여 protocol 파일을 추출하였고 이 자료를 다시 Microsoft사의 Excel 2016에서 계산하였다. 또한, 시선추적 데이터는 100 ms 이상을 시선고정 단위로 지정하여 자료를 추출하였고 시선추적 기록에 있어서 반응시간은 밀리세컨드(ms) 단위로 측정하였다. 추출은 오른쪽 눈, 비율(proportion)을 기준으로 추출하였다. 또한, ±3 SD를 벗어나는 값은 이상값(outlier)으로 처리하여 분석에서 제외하였다(Spit & Rispens, 2019; Lee, Kim, & Park, 2019).
정반응률(Accuracy)
본 연구에서는 대상자가 화면에 제시된 4개의 그림자극 중에서 올바른 목표자극을 고른 경우 1점, 그렇지 않은 경우 0점으로 채점하여 정반응률을 계산하였다. 정반응한 문항 수를 전체 문항 수로 나눈 후 100을 곱하여 퍼센트를 산출하였다. 예를 들어, ‘누구+가’ 유형에서 9문제를 정반응 하였다면, (9/12)×100=75%가 된다. 각 유형별 총 문항 수는 12개이다.
목표자극의 시선고정시간(Fixation duration)
본 연구에서는 문장처리과제에서 목표자극에 대한 시선고정시간(fixation duration)을 수집하고 heap map 분석을 하였다. 시선고정시간은 대상자가 질문자극을 들을 때 시선이 목표자극에 고정되는 총 시간을 의미하며, 제시된 시선고정시간은 100 ms 이상 Area of Interest (AOI)에 머물렀을 때 기록된 값이다. Heat map은 시선추적기계(eye-tracker)를 사용하여 측정된 데이터를 기반으로 Begaze 프로그램을 이용하는 분석방법 중 하나로, 기록된 시선고정 데이터의 정도에 따라 화면에 여러 색상으로 표현하여 시선양상을 시각화 하는 방법이다. 즉, heap map을 통해 대상자가 어느 곳을 가장 많이 보았는지를 알 수 있다.
과제별 구간에 따른 시선고정비율(Fixation proportion)
본 연구에서는 대상자에게 주어지는 질문자극을 시간 흐름에 따라 4가지 구간(NP1, NP2, VP1, VP2)으로 나누어 각 구간의 시선고정비율을 계산하였고, 유형별 구간예시는 Appendix 2에 제시하였다. 시선고정비율은 질문자극이 청각적으로 제시되는 과정에서 측정된 대상자의 시선고정에 대한 비율을 의미하고, 이때 하나의 문장으로 이루어진 질문자극을 4개의 구간으로 나눠서 비교한다. 따라서, 구간의 의미는 목표자극을 본 시간의 구간을 의미한다. 시선고정비율은 대상자의 시선이 각 구간에서 목표자극에 머문 시간을 그 구간이 제시되는 총 시간으로 나누어 비율을 계산하였다. 예를 들어, NP1 구간이 3,000 ms 제시되는 동안 대상자가 목표자극을 본 시간이 총 300 ms 인 경우, 이때 NP1 구간의 시선고정비율은 0.1이 된다.
자료 통계적 처리
격조사 유형(-가/-를)에 따른 누구(who) 의문사 질문에서 정반응율 및 시선고정비율의 집단 간 차이가 유의한지 알아보기 위하여 집단(청년층 vs. 노년층)×질문유형(누가 vs. 누구를)의 이원분산분석(two-way mixed ANOVA)을 실시하였다. 또한, 질문유형 별 구간에 따른 집단 간 차이가 유의한지 알아보기 위하여 구간(NP1 vs. NP2 vs. VP1 vs. VP2)×집단(청년층 vs. 노년층)의 이원분산분석(two-way mixed ANOVA)을 실시하였다. 집단통계 분석은 SPSS ver. 20 (SPSS Inc., Chicago, IL, USA) 프로그램을 사용하였다. 본 연구에서는 유의수준 .05에서 검증하였으며, 구형성(sphericity) 검정이 만족되지 않을 경우에, Greenhouse-Geisser 분석을 적용한 p-value 값에 근거하여 유의성을 보고하였다.
연구결과
누구(who) 의문사의 격조사 유형(-가/-를)에 따른 집단 간 정반응률 차이
문장처리과제에서 누구(who) 의문사의 격조사 유형(-가/-를)에 따른 집단 간 정반응률의 차이를 알아보았다. 정반응률의 집단 간 차이를 통계적으로 분석하기 위해 집단×유형 이원혼합분산분석(two-way mixed ANOVA)을 실시한 결과, 청년층은 평균 97.62%, 노년층은 88.73%의 정반응률을 보였고 통계 결과 및 그래프는 Table 3, Figure 3과 같다.
Descriptive statistics of accuracy (%) of task trials on the sentence processing for each group
Accuracy of task trials for each type in Young and Old groups.
먼저 청년층과 노년층 간 집단에 대한 주효과가 통계적으로 유의하였다(F(1,36)=21.450, p<.001). 즉, 노년층 집단의 평균 84.07%이 청년층 집단에서의 평균 97.22%에 비해 유의하게 낮은 것으로 나타났다. 다음으로, 유형에 대한 주효과가 또한 통계적으로 유의하였다 (F(1,36)=6.414, p<.05). 즉, ‘누구+를’ 유형에서 정반응률이 ‘누구+가’ 유형에서의 정반응률에 비해 유의하게 낮은 것으로 나타났다. 마지막으로, 집단과 유형에 대한 이차 상호작용이 통계적으로 유의하였다(F(1,36)=4.557, p<.05). 즉, ‘누구+를’ 유형에서 집단 간 차이가 ‘누구+가’ 유형에서 집단 간 차이에 비해 유의하게 큰 것으로 나타났다.
문장처리에서 누구(who) 의문사의 격조사 유형(-가/-를)에 따른 집단 간 목표자극의 시선고정시간(fixation duration) 차이
문장처리과제에서 의문사의 격조사 유형에 따른 집단 간 목표자극의 시선고정시간의 차이를 알아보았다. 통계적 차이를 분석하기 위해 이원혼합분산분석(two-way mixed ANOVA)을 실시하였다. 기술통계 결과 및 그래프는 다음의 Table 4, Figure 4와 같다.
Descriptive statistics of fixation duration (ms) of task trials on the sentence processing for each group
Fixation duration of task trials for each type in Young and Old groups.
집단에 대한 주효과가 통계적으로 유의하지 않았다(F(1,31)=1.241, p=.274). 즉, 노년층 집단의 평균 922.75 ms와 청년층 집단의 평균 845.771 ms에서 유의한 차이가 나타나지 않았다. 다음으로, 유형에 따른 주효과가 통계적으로 유의하였다(F(1,31)= 8.847, p<.05). 즉, ‘누구+가’ 유형의 평균 962.56 ms가 ‘누구+를’ 유형의 평균 803.63 ms에 비해 유의하게 높은 것으로 나타났다. 마지막으로, 집단과 유형에 대한 상호작용이 통계적으로 유의하지 않았다(F(1,31)=.331, p=.569). 즉, ‘누구+가’ 유형에서의 그룹 간 차이와 ‘누구+를’ 유형에서의 그룹 간 차이가 통계적으로 유의하지 않았다. 비록, 상호작용효과의 경우 통계적으로 유의하지 않았으나, heat map에서 집단의 시선고정 양상 차이를 확인할 수 있었다. 문장처리과제에서 의문사의 격조사 유형에 따른 집단 간 heat map은 다음의 Figure 5, Figure 6과 같다.
Example of heat map of ‘who+nominative’ type.
Example of heat map of ‘who+accusative’ type.
각 그림의 Area of Interest (AOI, 시선추적이 실행되는 지점)에 나타나는 집단의 시선고정시간을 시각화한 heat map을 살펴보면, 상호작용에 따라 시선의 분산 양상이 다름을 확인할 수 있다. Heat map에서 보이는 색깔로 시선고정시간의 정도 차이를 비교할 수 있는데, 파란색은 약 20 ms 이상, 초록색은 약 100-160 ms, 노란색은 약 220 ms 이상, 빨간색은 약 300 ms 이상 시선이 머문 것을 의미한다. 전체적인 양상을 보면, 노년층은 청년층에 비해 목표자극(target) 이외에도 다양하게 시선이 분산되었음을 알 수 있다. 또한, 유형별로 살펴보면, ‘누구+가’ 유형보다 ‘누구+를’ 유형에서의 모든 집단의 시선 분산 정도가 강하게 나타났다.
문장처리에서 누구(who) 의문사의 격조사 유형별 구간에 따른 집단 간 목표자극의 시선고정비율(fixation proportion) 차이
누구 의문사의 격조사 유형별 구간에 따른 목표자극의 시선고정비율 차이를 알아보았다. 구간은 총 4개로 나뉘며 NP1, NP2, VP1, VP2이다. ‘누구+가’ 유형에서 NP1은 의문사-누가 부분, NP2는 목적어 부분, VP1은 동사 부분, VP2는 지시-고르세요이다. 반면, ‘누구+를’ 유형에서 NP1은 의문사-누구를 부분, NP2는 주어 부분, VP1은 동사 부분, VP2는 지시-고르세요이다.
‘누구(who)+가’유형 구간별 목표자극 시선고정비율 차이
문장처리과제에서 의문사 ‘누구(who)+격조사 -가’ 유형에서 구간에 따른 집단 간 목표자극 시선고정비율(FP)의 차이를 비교하기 위해 청년층과 노년층을 집단 간 요인으로 지정, 4개의 구간(NP1, NP2, VP1, VP2)을 집단 내 요인으로 하는 이원혼합분산분석(two-way mixed ANOVA)을 실시하였다. 결과는 Table 5, Figure 7, Figure 8과 같다.
Descriptive statistics of target stimulus fixation proportion for each group in ‘who + nominative’ type
Fixation proportion of the target over time of ‘who+nominative’ type in both groups.
Fixation proportion of the target for each phrase in ‘who+nominative’ type of both groups.
집단에 대한 주효과가 통계적으로 유의하지 않았다(F(1,31)=.137, p=.714). 다음으로, 구간에 대한 주효과 또한 통계적으로 유의하지 않았다(F(3,93)=.103, p=.919). 마지막으로, 집단과 구간에 대한 이차상호작용도 통계적으로 유의하지 않은 것으로 나타났다(F(3,93)=.138, p=.891).
‘누구(who)+를’유형 구간별 목표자극 시선고정비율 차이’
문장처리과제에서 의문사 ‘누구(who)+격조사 -를’ 유형에서 구간에 따른 집단 간 목표자극 시선고정비율(FD)의 차이를 비교하기 위해 청년층과 노년층을 집단 간 요인으로 지정, 4개의 구간(NP1, NP2, VP1, VP2)을 집단 내 요인으로 하는 이원혼합분산분석(two-way mixed ANOVA)을 실시하였다. 기술통계 결과 및 그래프는 Table 6, Figure 9, Figure 10과 같다.
Descriptive statistics of target stimulus fixation proportion for each group in ‘who + accusative’ type
Fixation proportion of the target over time of ‘who+accusative’ type in both groups.
Fixation proportion of the target for each phrase in ‘who+accusative’ type of both groups.
*p < .05.
집단에 대한 주효과가 통계적으로 유의하지 않았다(F(1,31)=.264, p=.611). 다음으로, 구간에 대한 주효과가 통계적으로 유의하였다(F(3,93)=16.463, p<.001). 이에 따라 Bonfferoni를 사용하여 사후검정을 실시하였다. 그 결과, NP1과 VP1 차이(p<.001), NP1과 VP2 차이(p<.001), NP2와 VP1 간 차이(p<.05), NP2와 VP2 간 차이(p<.05)는 통계적으로 유의하였으나, NP1과 NP2 차이(p=.099) 및 VP1과 VP2 간 차이(p=1.00)는 유의하지 않았다.
마지막으로, 집단과 구간에 대한 이차상호작용이 통계적으로 유의하였다(F(3,93)=3.623, p<.05). 유의한 이차상호작용에 대한 사후검정으로 각 구간별로 집단 간 차이가 있는지 알아보기 위해 일원배치분산분석을 실시하였다. 그 결과, VP2에서 집단 간 차이는 통계적으로 유의하였으나(F(1,32)=4.411, p<.05), NP1 (F(1,31)=2.584, p=.101), NP2 (F(1,31)=.054, p=.817) 및 VP1 (F(1,31)=.825, p=.371)에서 그룹 간 차이가 유의하지 않았다. 즉, 유의한 이차상호작용은 VP2 구간에서 노년층의 시선고정 비율이 청년층에 비해 낮아지는 것에 기인한다.
논의 및 결론
노화에 따른 언어처리 능력 감소는 다양한 연구에서 진행되고 있다. 본 연구는 의문사 중에서도 주어와 목적어 처리를 가능하게 하는 누구(who) 의문사를 이용하여 노년층과 청년층의 문장처리를 비교하고자 하였다. 누구(who) 의문사의 격조사 유형에 따른 집단 간 과제 수행력 차이와 그 과정에서 나타나는 안구 움직임을 분석하였다. 본 연구의 목표는 다음과 같다. (1) 문장처리과제에서 누구(who) 의문사의 격조사 유형에 따라 두 집단 간 정반응률 차이가 있는지 알아보고자 하였다. (2) 문장처리과제에서 누구(who) 의문사의 격조사 유형에 따라 두 집단 간 목표자극에 대한 총 시선고정시간 차이가 있는지 알아보고자 하였다. (3) 문장처리과제에서 누구(who) 의문사의 격조사 유형 별 구간에 따라 두 집단 간 목표자극의 시선고정비율의 차이가 있는지 알아보고자 하였다.
본 연구결과를 정리하면 다음과 같다. 문장처리과제에서 누구(who) 의문사의 격조사 유형에 따라 두 집단 간 정반응률 차이를 분석하였다. 그 결과, 노년층 집단의 정반응률은 평균 84.07%이며 청년층 집단의 평균 97.22%에 비해 유의하게 낮은 것으로 나타났다. 또한, 모든 대상자들이 ‘누구+를’ 유형에서 보다 ‘누구+가’ 유형에서 높은 정반응률을 보였다. 마지막으로, 집단과 유형에 대한 이차상호작용이 통계적으로 유의하였다. 즉, ‘누구+를’ 유형에서 집단 간 차이가 ‘누구+가’ 유형에서 집단 간 차이에 비해 유의하게 큰 것으로 나타났는데, 이는 ‘누구+를’ 유형에서 노년층의 수행력이 저하되는 것에 기인한다. 본 연구결과는 노년층이 목격적 처리에서 청년층에 비해 낮은 수행력을 보이는 선행연구(Stine-Morrow, Ryan & Lenard, 2000) 결과와 일치한다. 이를 통해 노년층이 목적격처리에서 주격처리에 비해 어려움을 보이는 것을 다시 한번 확인할 수 있다. 또한, heat map을 통해 나타난 노년층의 시선 분산을 고려해 볼 때, 목적격 처리가 주격처리에 비해 더 복잡한 과정임을 시사하는 선행연구(Neuhaus, & Penke, 2008; Park & Choi, 2011)와 같은 맥락으로 해석할 수 있다. 그런데, 노년층 및 청년층에게 동일한 과제를 제시했음에도 노년층이 청년층에 비해 문법적으로 더 많은 오류를 보이는 것은 노년층의 낮은 인지능력 및 작업기억에 기인하는 것으로 유추할 수 있고, 이는 선행연구 결과와 일치한다(Caplan et al., 2011; Kemper et al., 2001; Stine-Morrow et al., 2000). 따라서 노년층의 경우 처리용량이 증가되는 복잡한 문장에서 청년층에 비해 높은 오류를 보인다. 노년층은 특히, 비규범어순(non-canonical)에서 규범어순(canonical)에 비해 어려움을 보이는 것으로 알려져 있는데(Sung, 2015a), 이것 역시 비규범 어순에서 문장처리가 더 어렵기 때문이다. 본 연구의 과제 유형 중 ‘누구+를’ 유형의 질문을 살펴보면, 비규범 어순임과 동시에 목적격처리가 함께 들어있는 과제이다. 즉, 노년층이 어려움을 보이는 것으로 알려진 비규범 어순과 목적격처리가 모두 들어있기 때문에, 노년층은 통사적으로 많은 처리 부담을 느꼈을 것이고 따라서 청년층에 비해 저하된 수행력을 보인 것으로 해석할 수 있다.
문장처리과제에서 누구(who) 의문사의 격조사 유형에 따라 두 집단 간 목표 자극에 대한 시선고정시간에 차이가 있는지 분석하였다. 그 결과, 노년층 집단의 평균 922.75 ms와 청년층 집단의 평균 845.771 ms가 통계적으로 유의한 차이가 나타나지 않았다. 비록, 시선고정시간에 있어서 집단 간 차이가 통계적으로 유의하지 않았으나, heat map에서 노년층의 시선이 청년층에 비해 더 분산되어 있음을 확인할 수 있었다. 시선고정시간과 heat map을 통한 분석을 종합해 볼 때, 노년층의 질문을 듣고 목표 그림을 고르는 문장처리 과정이 청년층에 비해 원활하지 못함을 의미한다. 즉, 청년층의 경우 전략적으로 목표자극을 보는 반면, 노년층은 언어처리의 어려움으로 인해 목표자극을 효율적으로 찾지 못하여 여러 자극(그림)을 번갈아 본 것으로 나타난다. 따라서 노년층의 시선 이동이 잦았으며 heat map에서는 흩어진 점들로 확인할 수 있다. 이미 언급된 바와 같이, 시선추적을 통한 안구 움직임은 지각 및 인지활동을 반영하고(Hyönä et al., 2002; Rayner, 1998; Trueswell & Gleitman, 2007), 특히 언어적으로는 음운, 의미, 통사, 읽기처리 등의 언어처리 과정을 살펴보기 위한 도구로 사용되어왔으며 다양한 시선추적연구에서 시각자료를 활용하여 연구를 진행하여 왔다(Arnold, Eisenband, Brown-Schmidt, & Trueswell, 2000; Brandt-Kobele & Höhle, 2010; Choi, 2019; Hwang, 2019; Wonnaccot, Newport, & Tranenhaus, 2008). 본 연구에서도 안구움직임을 통해 청년층과 노년층의 언어처리과정에서 차이를 알아볼 수 있었다. 다음으로, 두 그룹 모두 ‘누구+가’ 유형에서 target에 대한 시선고정시간이 길게 나타났다. 이것은, ‘누구+가’ 유형에서 목표 그림(target)을 찾는 처리 과정이 원활히 일어나는 것으로 해석할 수 있고, heat map에서 그 경향을 확인할 수 있다. ‘누구+가’ 유형의 heat map에서 전반적으로 목표 그림에 시선이 집중되어 있는 것을 볼 수 있다. 반대로, ‘누구+를’ 유형의 heat map에서는 시선이 목표그림 외에도 여러 그림으로 분산된 경향을 확인할 수 있고, 이 경향은 노년층에서 더 강하게 나타난다. 즉, 노년층은 ‘누구+를’ 유형에서 강한 시선 분산을 보였고, 이것은 처리 과정에서 안구 움직임이 자주 이동하였다는 것을 의미한다. 따라서, ‘누구+를’ 유형에서 노년층은 문장처리의 어려움을 느꼈고, 노년층의 복잡한 문장처리 과정이 시선분석으로 제시된 것으로 해석할 수 있다. 마지막으로, ‘누구+가’ 유형에서의 그룹 간 차이와 ‘누구+를’ 유형에서의 그룹 간 차이가 유의하지 않았다. 이것은 그룹 내에서도 개인 간 차이가 크기 때문임을 추측할 수 있다. 청년층 집단과 노년층 집단 모두 표준편차가 매우 큰 편이다. 집단 내에서도 표준편차가 큰 것에 대한 원인 중 하나로, 개인차를 꼽을 수 있다. 실험이 끝난 후 인터뷰를 통한 대상자들의 반응을 종합하면, 먼저 그림체에 대한 개인 선호도 차이가 존재했다. 즉, 그림이 특이하거나 신기해서 더 오래 본 문항이 있다고 대답하였다. 둘째, 과제 수행에 있어 개인의 전략 차이가 있다. 예측 가능한 문제에서는 질문을 듣고 처리하는 과정이 비교적 짧기 때문에 그림을 오래 보지 않거나 AOI 이외에 다른 영역을 보는 경우가 있다고 대답하였다. 이러한 개인차가 있음을 미뤄볼 때, 개인차로 인한 분산이 높게 나온 것에 기인하여 유형과 집단 간 이차상호작용이 유의하지 않은 것으로 설명할 수 있다.
문장처리과제에서 ‘누구+가’ 유형의 구간에 따라 두 집단 간 목표자극에 대한 시선고정비율의 차이가 있는지 분석하였다. 그 결과, 집단 간 시선고정비율 차이가 없었고 구간 별 평균의 차이도 유의하지 않았다. 마지막으로, 구간 별 집단 차이 또한 유의하지 않았다. 이를 종합하면, ‘누구+가’ 유형에서 구간에 따른 집단 간 차이는 유의하지 않는다는 것을 확인할 수 있다. ‘누구+가’ 유형에서 노년층의 수행력이 청년층과 비교하였을 때 크게 다르지 않았는데, 이것은 본 연구의 연구 질문 1번의 결과와도 같은 맥락이다. 즉, ‘누구+가’ 유형은 규범어순이며 주격조사 처리 수행을 확인하는 쉬운 과제이기 때문에 집단 차이가 나타나지 않은 것을 의미한다.
문장처리과제에서 ‘누구+를’ 유형의 구간에 따라 두 집단 간 목표자극에 대한 시선고정비율의 차이가 있는지 분석하였다. 그 결과, 집단 차이가 유의하지 않았으나 구간별 평균의 차이가 유의하였다. 즉, 문장 후반부로 갈수록 두 집단의 시선고정비율이 높아지는 것으로 나타났다. 문장의 후반부인 VP2 구간은 답을 고르기 전 최종적으로 문장처리가 일어나는 구간이다. 다시 말해 의미적, 통사적 처리를 통합하여 문장을 이해하는 구간으로, 이 구간에서는 처리 과정에서 더 많은 시간이 필요함을 뜻한다. 따라서 구간의 차이는 처리 과정의 복잡성에 기인하는 것으로 해석할 수 있다. 마지막으로, 집단과 구간에 대한 이차 상호작용이 유의하였는데, 이는 VP2 구간에서 노년층의 시선고정비율이 청년층에 비해 낮아지는 것에 기인한다. VP2 구간은 질문의 마지막 어절이다. 이 구간은 ‘고르세요’의 지시가 나오는 구간으로, 답을 고르기 직전의 의사결정(decision making)을 해야 할 때이다. NP1, NP2, VP1 구간에서 문장처리를 끝내고 마지막 구간인 VP2에서는 답을 고르기 위해 확정을 짓는 구간이라고 할 수 있다. VP2 구간에서 청년층의 시선고정비율이 높아지는 것은 문장끝효과(sentence-final effect)로 설명할 수 있다. 문장끝효과는 문장의 마지막 구간에서 시선고정 시간이 길어지는 현상을 가리킨다(Stowe, Kaan, Sabourin, & Taylor, 2018). 이것은 또한 문장통합효과(sentence wrap-up effect)로 설명할 수 있다. 이 용어는 단순히 오랜 시간만을 의미하는 것이 아니라, 문장의 끝부분이 문장처리 증가를 반영하는 부분임을 암시한다. 많은 문헌에서, 문장의 마지막 구간에서 문장 통합과정이 일어난다고 보고되어왔다(Just & Carpenter, 1980; Rayner, Kambe, & Duffy, 2000). 이러한 점을 고려하면, VP2 구간은 문장처리를 마무리 짓고 인지, 언어적 사고가 통합되는 지점임을 알 수 있다. 그런데 노년층은 VP2 구간에서 별다른 증가를 보이지 않았는데, 이를 통해 노년층이 청년층에 비해 문장끝효과 및 문장통합효과가 낮게 나타나는 것으로 해석할 수 있다. 그런데, ‘누구+가’ 유형에서는 문장통합효과가 나타나지 않았다. 이것은 ‘누구+가’ 유형이 문장처리의 복잡성이 낮아서 처리부담이 덜한 유형이기 때문이다. 반면 ‘누구+를’ 유형은 그 처리과정이 더 복잡하고 인지, 언어적 부담을 요구하는 유형이기 때문에 문장통합효과가 더 크게 나타난다고 할 수 있다. 즉, ‘누구+를’ 과제의 마지막 구간인 VP2가 문장통합효과를 살펴볼 수 있는 구간이라 할 수 있는데, 이 구간에서 노년층의 시선고정비율이 청년층에 비해 낮게 나타나는 것은, 노년층의 문장통합과정이 효율적이지 못한 것으로 해석할 수 있다.
본 연구에 대한 통합적 논의를 정리하면 다음과 같다. 본 연구는 시선추적기를 활용하여 누구(who) 의문사의 격조사 유형에 따른 청년층과 노년층의 문장처리과정의 차이를 분석하였다. 과제 수행력을 나타내는 정반응률에서 집단 간 차이가 유의하였고, 시선추적 변수 중에서는 시간구간에 따른 목표자극 시선고정비율 차이가 유의한 것으로 나타났다. 본 연구에서 오프라인 측정으로 사용한 정반응률은 정반응 및 오반응한 모든 문항을 포함한 것으로 전체 반응에 따른 정반응 비율에 대한 분석이지만, 시선추적 분석은 오반응 문항을 제외하고 정반응한 문항만을 토대로 한 분석이기 때문에 정반응률과 시선추적 결과가 일치하지 않을 수 있다. 즉, 오프라인에서 정반응한 문항에서 시선추적을 사용한 온라인 실시간 처리 분석에 따른 결과 양상은 다를 수 있다. 시선추적 데이터는 실시간 처리과정을 기록 및 분석한 것으로, 종속변수를 무엇으로 하느냐에 따라 측정치가 달라질 수 있다. 본 연구에서는 시선고정시간, 시선고정비율 두 가지의 변수를 사용하였고, 노년층이 문장처리과정에서 시간 흐름에 따른 시선고정비율 변수에서 차이를 보이는 것을 확인할 수 있었다. 즉 시선추적을 활용한 실시간 처리기법을 통해 노년층과 청년층의 문장처리과정이 문장의 후반부에서 차이가 있다는 것을 발견할 수 있었다. 이를 통해 문장처리과정에서 노년층의 시선 이동 및 시선고정비율이 청년층과 다르다는 것을 확인하였다. 나아가 목적격 처리문장에서 노년층의 문장통합과정의 효율성이 낮다는 것을 알 수 있었다. 이처럼, 시선추적기를 활용한 연구는 오프라인 과제 수행력 측정만으로는 알 수 없는 실시간 문장처리과정을 알아볼 수 있다는 점에서 장점을 가진다. 이는 국내의 노년층을 대상으로 하는 제한적인 시선추적 연구에 기초적 자료를 기여하는데 의미가 있다. 또한, 본 연구를 통해 밝혀진 노년층의 문장통합과정의 비효율성을 극복하기 위해 말속도 조절, 문장의 전형성 난이도 조절, 작업기억용량에 대한 부담을 줄여주는 전략들을 사용하였을 때 긍정적인 효과를 기대할 수 있는지에 대한 향후 연구가 보다 다양하게 시행될 필요가 있다.
본 연구 방법과 결과를 바탕으로 연구가 가지는 제한점을 제시하고 후속 연구자를 위한 제언을 하고자 한다. 첫째, 본 연구의 대상자는 서울 및 인천, 경기 지역에 거주하는 청년층 및 노년층이다. 따라서 이들의 데이터로 정상 청년층 및 정상 노년층을 일반화하기에는 다소 한계가 있다. 향후 문장처리과제에 관한 연구가 지속적으로 진행되기 위해서는 지역을 다양하게 모집하고 대상자의 수를 충분히 하여 통계적 타당도를 높여야 할 것이다. 둘째, 시선고정시간 및 시선고정비율 분석 시, 본 연구에서는 오반응한 문항을 제외하고 정반응 문항만을 분석하였다. 또한, 시선비율 30% 이하는 대상에서 제외하였다. 이에 따라 분석에서 제외되는 대상자 및 문항이 발생하였다. 따라서 후속 연구에서는 문항과 대상자 수를 충분히 확보하여 데이터의 양적, 질적 측면을 모두 만족하는 통계분석을 할 것을 제안한다.