Using the Eye -Tracking Method for Studying Recipient - Centered Multimodal Literacy
Hyunji Oh
서울동의초등학교
Korea Business Review 57Vol. 4No. pp.65-91 (2022)
Abstract
Multimodal text is becoming the main means of constructing meaning in our lives. As the literacy environment of children and adolescents is very different from the environment in the growth process of the older generation, it is very necessary to understand and analyze how they construct the meaning of multimodal text. Therefore, this study proposes using eye-tracking as a research method that can infer the audience’s visual mode perception and cognitive process. This paper presents an experiment using a webcam eye-tracking program as an example, categorizes the format of the audience’s video reading path, and reveals that the audience organizes the video internally and structures the contents.
Keywords
복합양식문식성의미구성수용자지각이해시선 추적웹캠
References
- [1] [학술지(정기간행물)] 김상한/아동 독자의 포스트모던 그림책의미 구성 양상 탐색 - 데이비드 위즈너의 『아기 돼지 세 마리』를 중심으로 -/아동청소년문학연구/2020/(26)/315~353/한국아동청소년문학학회/https://doi.org/10.24993/JKLCY.2020.06.26.315
- [2] [학술지(정기간행물)] 김소이/초등학생의 경향성 지식 생성 과정에서 경향성 지식 생성 능력에 따른 안구 운동 분석/한국초등교육/2018/29(3)/41~59/초등교육연구원/10.20972/kjee.29.3.201809.41
- [3] [학술지(정기간행물)] 김평원/시선 추적 결과물을 활용한 시각 자료 해석 교육/새국어교육/2017/(110)/67~91/한국국어교육학회/10.15734/koed..110.201703.67
- [4] [학술지(정기간행물)] 문보경/아이트래킹을 통한 공간 시지각 실험연구 경향 및 공간연구의 지향성에 관한 연구/한국공간디자인학회 논문집/2019/14(7)/429~438/한국공간디자인학회/10.35216/kisd.2019.14.7.429
- [5] [학술지(정기간행물)] 박민정/역량기반 교육과정의 특징과 비판적 쟁점 분석:내재된 가능성과 딜레마를 중심으로/교육과정연구/2009/27(4)/71~94/한국교육과정학회/10.15708/kscs.27.4.200912.004
- [6] [학술지(정기간행물)] 박영민/읽기 부진 학생의 눈동자 추적을 통한 읽기 과정 특성 분석 연구/국어교육/2012/(139)/335~362/한국어교육학회/
- [7] [학술지(정기간행물)] 박영민/눈동자 추적 및 반성적 사고구술을 활용한 학업성취수준별 국어교과서읽기 방식의 차이 분석/청람어문교육/2013/(48)/155~190/청람어문교육학회/10.26589/jockle..48.201312.155
- [8] [학술지(정기간행물)] 박찬흥/눈동자 추적과 회상적 사고구술을 활용한 쓰기 과정 분석과 쓰기 교육 연구에서의 활용/작문연구/2016/(30)/187~223/한국작문학회/
- [9] [학술지(정기간행물)] 변은지/복합양식 텍스트가 학습 목적 읽기에 미치는 영향에 대한 연구/청람어문교육/2019/(72)/197~240/청람어문교육학회/10.26589/jockle..72.201912.197
- [10] [학술지(정기간행물)] 서혁/중학생의 양식의 정보성 인식 양상 연구 —시선추적기법을 활용하여/국어교육학연구/2018/53(2)/79~109/국어교육학회/10.20880/kler.2018.53.2.79
- [11] [학술지(정기간행물)] 이소라/시선추적장치를 활용한 읽기 과정 연구의 현황과 가능성 탐색/국어교육학연구/2013/(46)/479~503/국어교육학회/10.20880/kler.2013..46.479
- [12] [학술지(정기간행물)] 이윤정/시선추적장치를 이용한 형태지각에 관한 연구 - 형태와 배경을 중심으로 -/디지털디자인학연구/2008/8(4)/229~237/한국디지털디자인학회/10.17280/jdd.2008.8.4.023
- [13] [학술지(정기간행물)] 이재승/안구 운동 추적을 통한 국어 교과서 단원 도입면 개선 방안 연구/한국초등국어교육/2012/(49)/134~159/한국초등국어교육학회/10.22818/jeke.2012..49.134
- [14] [학술지(정기간행물)] 이재승/안구 운동 추적을 통한 국어 교과서 단원 도입부 개선 방안 연구 Ⅱ : 도입 질문과 말풍선 배치를 중심으로/한국초등교육/2012/23(3)/89~109/초등교육연구원/10.20972/kjee.23.3.201209.89
- [15] [학술지(정기간행물)] 장동민/시선 추적 장치를 활용한 초등학생들의 설명하는 글 요약하기 양상 분석/학습자중심교과교육연구/2021/21(19)/283~296/학습자중심교과교육학회/
- [16] [학술지(정기간행물)] 최숙기/복합 양식 텍스트에 대한 독자의 읽기 행동 분석에 기반한 디지털 시대의 읽기 교육 방안 탐색/독서연구/2013/(29)/224~264/한국독서학회/
- [17] [학술지(정기간행물)] 편지윤/복합양식 텍스트 유형별 읽기 전략 사용 비교/청람어문교육/2020/(73)/33~59/청람어문교육학회/10.26589/jockle..73.202001.33
- [18] [단행본] 10대 미디어 이용조사/한국언론진흥재단/한국언론진흥재단/2019/~///
- [19] [단행본] 어린이미디어 이용조사/한국언론진흥재단/한국언론진흥재단/2020/~///
- [20] [단행본] 시각적 사고/Arnheim, R./이화여자대학교출판부/2004/~///
- [21] [학술지(정기간행물)] Boeriis, M./Tracking visual segmentation : connecting semiotic and cognitive perspectives/Visual Communication/2012/11(3)/259~281//
- [22] [학술지(정기간행물)] Eckstein, M./Beyond eye gaze : What else can eyetracking reveal about cognition and cognitive development?/Developmental Cognitive Neuroscience/2017/25/69~91//
- [23] [단행본] Eye movements and visual cognition: Scene perception and reading/Henderson, J. M./Springer -Verlag/1992/~///Visual attention and eye movement control during reading and picture viewing
- [24] [단행본] The Routledge handbook of multimodal analysis/Holsanova, J./Routledge/2014/~///Reception of multimodality: Applying eye tracking methodology in multimodal research
- [25] [학술지(정기간행물)] Holsanova, J./Entry points and reading paths on newspaper spreads : comparing a semiotic analysis with eye-tracking measurements/visual communication/2006/5(1)/65~93//
- [26] [단행본] The Routledge handbook of multimodal analysis/Jewitt, C./Routledge/2014/~///Different approaches to multimodality
- [27] [단행본] Literacy in the new media age/Kress, G./Routledge/2003/~///
- [28] [단행본] Multimodality : A social semiotic approach to contemporary communication, New York/Kress, G./Routledge/2010/~///
- [29] [단행본] Reading Images : The Grammar of Visual Design/Kress, G./Routledge/1996/~///
- [30] [학술지(정기간행물)] Pellicer-Sánchez, A./Young learners’ processing of multimodal input and its impact on reading comprehension : An eye-tracking study/Studies in Second Language Acquisition/2020/42(3)/577~598//
- [31] [학술지(정기간행물)] Prensky, M./Digital natives, digital immigrants/On the Horizon/2001/9(5)/1~6//
- [32] [학술지(정기간행물)] Rayner, K./Eye movements and attention in reading, scene perception, and visual search/The Quarerly Journal of Experimental Psychology/2009/62(8)/1457~1506//
- [33] [학술지(정기간행물)] Semmelmann, K./Online webcam-based eye tracking in cognitive science : A first look/Behavior Research Methods/2018/50/451~465//
