초록 열기/닫기 버튼
본 연구의 목적은 학문 목적 한국어 듣기 평가 개발을 위하여 유학생 평가 도구로 사용되는 TOPIK의 내용 타당도를 검토하는 데에 있다. 학문 목적 학습자의 언어 능력을 판단하기 위해 안정적으로 이용되고 있는 TOEFL iBT와 비교를 통해 TOPIK의 타당도를 고찰하였다. 두 시험의 기출 문제지는 7회 분량씩 각 350문항, 206문항이 수집되었다. 수집된 자료들은 입출력의 관점에서 코딩 값을 부여하였으며 IBM SPSS Statistics 26.0을 통해 분석하였다. 분석 결과, TOEFL은 모든 지문이 강의, 면담, 행정 담화들로 구성된 데 반해, TOPIK은 유학생의 목표 상황과 관련성이 떨어지는 장면들이 78%에 달하였으며, 면담 상황은 고려되지 않았다. 출력 양상의 경우에도 비교적 고른 분포를 보이는 TOEFL과 달리, TOPIK에서는 특정 유형에 편중되어 있었고, 강의 듣기에서는 논리적 추론 질문이, 행정 담화에서는 화용적 추론 질문이 출제되지 않았다. 두 시험의 차이는 통계적으로도 유의하였으며, TOEFL 대비 상대적인 관점에서는 물론 절대적인 관점에서도 타당도가 높지 않았다. 이에 현실적인 조건들을 감안하여 현행 시험의 큰 틀은 유지하되 타당도를 높일 수 있는 개선 방안을 마련하였다.
The purpose of this study is to investigate the content validity of TOPIK, which is employed as an evaluation tool for international students in order to develop Korean listening evaluation for academic purposes. The validity of TOPIK was examined by comparing it with TOEFL iBT, which is stably used to measure the language ability of learners with academic purposes. 350 questions and 206 questions were collected from 7 papers of each test. The collected data were coded in terms of input and output, and analyzed with the use of IBM SPSS Statistics 26.0. The results indicate that all the passages in TOEFL consisted of lectures, counseling, and administrative discourses, whereas in TOPIK, 78% of the scenes were less relevant to the target language use domain of international students, and the counseling situation was not considered at all. In the case of output patterns, unlike TOEFL, which showed relatively even distribution, TOPIK was focused on specific question types, and in lecture listening, logical reasoning questions were not presented, and pragmatic reasoning questions were not given in administrative discourse. The difference between the two tests was statistically significant, and the validity of the TOPIK test was not high compared to TOEFL, nor was it in itself. In consideration of practicality, educational application which can increase the validity while maintaining the frame of the current test, was suggested.
키워드열기/닫기 버튼
international student, Korean for academic purposes, listening comprehension test, TOPIK, content validity
