평가론 1. 한국어수업과평가 1) 한국어수업에서교사는끊임없이학습자를평가함 2) 평가 (assessment) 는광범위한영역에걸쳐교육내내실시되는능력측정활동임 - 퀴즈, 받아쓰기, 중간시험, 기말시험등의형식적인시험 - 객관적인지식뿐만아니라주관적인수행을통해장기간실시되는측정활동 3) 시험 (test) 는객관적인지식에대해단기간에실시되는도구나절차를말함 2. 한국어평가의목적 1. 진단과피드백 1) 학습자의언어능력 ( 또는적성 ) 을진단하여강점과약점을파악 2) 교사, 학습자, 관리자에게다양한정보제공 : 예 ) 발음진단, 첫시간쓰기능력측정 2. 학습자선발 1) 합격, 불합격을구분하여학습자참여제한예 ) 언어적성검사를통해학습자의언어학습의성공, 실패를예측하고참여여부를결정함 3. 배치 (placement) 1) 능력에따라적절한수준의교육프로그램에배치 2) 배치의적절성에따라교육의효과에영향을미침 : 예 ) 배치고사 4. 프로그램평가, 개선 1) 언어교육과정이끝난후에교육프로그램의효과를측정하기위해사용예 ) 사전평가와사후평가의비교 2) 개인성적보다집단성적이중요하게작용 3. 한국어평가의유형유형분류기준 : 평가목적에따라학습내용을총괄적으로평가하는지의여부특정교육과정의학습내용을중심으로평가하는지, 일반적인한국어능력을측정하는지평가방식에따라 1. 성취도평가와숙달도평가 1) 성취도평가 : 프로그램목표에어느정도도달했는지를평가하는것교과과정, 학습내용과범위에맞춰평가중간시험, 기말시험등 2) 숙달도평가 : 전반적인언어능력측정평가개별과정, 단일언어기능에국한하면안됨보통공신력있는기관을통해실시됨한국어능력시험 (TOPIK) - 1 -
2. 진단시험과배치시험 1) 진단시험 : 특정영역의능력을진단하기위한평가학습자의약점과강점을파악하거나, 교육내용을결정하고교육방법을보완하는데활용됨 2) 배치시험 : 특정교육과정에서수준에맞게학생을배치하기위해능력을측정하는시험때로는숙달도평가결과를활용하기도함 3. 형성평가와총괄평가 1) 형성평가 : 교수, 학습진행과정에서성장을도우려고실시퀴즈, 받아쓰기, 수행평가, 짝활동등교실에서수업중에이루어지는대부분의평가는형성평가임학습내용, 방법에대해피드백을주는역할을함 2) 총괄평가 : 학습한것을총괄적으로평가하는것단원말평가, 기말시험일정기간의교육내용과방법에대한결과를측정하여교육지속, 확장, 종료, 변경등을결정 4. 기타평가 1) 직접평가 : 언어수행능력을직접적으로측정. 구두시험, 작문시험 2) 간접평가 : 언어지식을측정하는평가지필시험의대표적인유형들 ( 다지선다형시험, 빈칸채우기 ) 3) 준거지향평가 ( 절대평가 ) 와규준지향평가 ( 상대평가 ) : 미리설정한준거로평가, 상대적인서열로평가 4) 수행평가 : 학습결과나성취중심의평가에서벗어나구체적인상황에서학습자의행동과정이나결과를평가교사와학습자, 학습자간의역동적인관계를중시함인터뷰, 발표, 역할극, 프로젝트활동, 포트폴리오등 4. 한국어평가의개발 1. 좋은평가의요건신뢰도 : 평가도구가피험자의언어능력을 어떻게 평가하는가? 일관되게측정하는가? 타당도 : 평가도구가 무엇 을측정하는가? 평가목적에맞는것을측정하는가? 역류효과 : 평가결과를사용하는것이개인, 사회, 교육과정에긍정적인영향을끼치는가? 실용도 / 효용성 : 평가를위한경비, 시간, 노력이경제적인가? 1) 신뢰도 : 측정의일관성, 객관성평가도구가측정하려는것을얼마나안정적으로일관성있게측정하는가의문제이며, 정확하게오차없이측정한정도임언어능력측정의 어떻게 와관련된문제시험신뢰도 : 예 ) 듣기시험환경채점신뢰도 : 채점자내신뢰도, 채점자간신뢰도 2) 타당도 : 평가의가장중요한요건평가도구가목적에맞게측정하려는것을적절하게측정하는가? - 2 -
표준화된언어능력평가에서는반드시타당도평가가이루어져야함타당도점검방법 - 내용타당도에근거 : 경험있는전문가를통해 - 구인타당도에근거 : 이론, 경험에근거하여구인이무엇인지조사하고이를바탕으로문항구성 - 준거관련타당도에근거 : 시험준거에따라합격등으로평가의타당도확인 - 안면타당도 : 수험자들이평가가유용하다고보는정도 3) 실용도 : 평가를위한경비, 시간, 노력의경제성최소한의경비, 노력, 시간을들여최대한으로평가목표를달성하는가의문제실용도가높은시험 : 평가실시, 채점, 해석이용이하고경제적임 4) 역류효과 : 평가결과가교수, 학습에미치는영향좋은평가는긍정적인역류효과를유발해야함유익한역류효과 : 학습자에게강점과약점을알수있게함동기부여, 자율성, 자신감, 전력개발에도움을줌유해한역류효과 : 주입식교육, 시험대비강좌 2. 평가도구개발절차평가설계 : 평가목적확인 / 목표구체화 / 평가항목 ( 과제, 상황등 ) 선정 / 계획서작성문항개발 : 문항구성 ( 문항, 지시문 ) / 문항검토예비시험 ( 사전평가 ) : 예비시험실시 / 결과분석 / 문항수정및보완평가실시및결과분석 : 실시, 채점 / 결과분석 1) 평가설계 1 평가의전체틀 평가목적평가범주평가형태문항수시간문법적능력다지선다형성취도평가 20문항 30분사회언어학적능력단단형등 2 목표구체화 : 평가항목을선정하기전에범위내에서무엇을평가할것인지구체화예 ) 윗사람과의대화에서높임말을이해하고사용할수있다. 3 평가항목선정 : -( 으 ) 시-, 대화, 직장상황, 소개하기 4 평가계획표, 출제구상표 2) 문항개발 1 문항구성 : 출제구상표에계획된문항수보다 1.3개정도많은문항제작팀별로구성문항유형에따른주의사항을고려해야함문항은반복해서다듬고다듬어야함 2 문항점검 : 문항은반드시상호검토, 수정절차를거침문항내용, 형식점검문항점검표활용 3) 예비시험실시 : 1 예비시험실시 : 표준화된평가는반드시예비시험실시본평가대상자와유사한집단으로실시 2 결과분석 : 문항난이도, 변별도는적절한가? 시간은적절한가? 측정하고자하는언어능력을평가할수있는가? - 3 -
3. 한국어평가문항구성 1) 폐쇄형문항 1 진위형 : 예, 아니오 중택일. 단편적인사실을물을때사용함 2 선다형 : 가장빈번하게사용되는유형, 짧은시간에많은항목을평가할수있으며, 채점이용이함. 그러나실제적인언어구사력을측정하는데한계가있음 3 배합형 : 두개이상의관련있는것들을연결하는문항 2) 반개방형문항 1 단답형 : 간단한단어나문장으로답하는문항. 특정문법이나어휘점검에많이사용됨 2 클로즈테스트 : 규칙적, 불규칙적으로빈칸을두고완성하는문항문장, 담화의의미를이해해야하며, 문법, 어휘, 철자에대한지식이요구되므로복합적인능력측정문항 3) 개방형문항 : 자유작문과번역구두시험 : 발표, 역할극등채점기준이세밀하게작성되어야함 4. 평가결과분석 1) 양적분석의하나로고전검사이론에서분석하는내용 2) 문항난이도 : 문항의쉽고어려운정도를나타내는지수 3) 문항변별도 : 능력이높은학습자와낮은학습자를변별하는정도 4) 오답내력도 : 선다형문항에서답지의질을말함. 능력이낮은학생은여러오답을고르도록구성해야함 5. 한국어능력시험의유형 1. 한국어능력시험 (TOPIK) 1) 2011 년현재 49 개국가, 161 개지역에서실시됨 2) 연 4 회 (1 월, 4 월, 7 월, 9 월 ) 실시 3) 대학입학시, 취업시에한국어능력을객관적으로증명 4) 평가영역 : 4 개영역 ( 어휘 / 문법, 쓰기, 듣기, 읽기 ) 5) 배점 : 영역별 100 점씩 400 점만점 2. 세계한국말인증시험 (KLPT) 1) 2001 년에 1 회실시 2) 평가영역 : 듣기, 어휘, 문법, 읽기, 담화 3) 점수제 (500 점만점 ) 4) 한국어능력시험과의점수대비표를제시하고있지만전문성이부족하다고평가됨 3. 미국국방언어능력시험 1) 미국국방언어교육센터 (DLI) 가개발한언어숙달도시험으로군사관련주제로다루어짐 2) 영역구성 : 말하기, 듣기, 읽기 3) 등급기준 : 총 11 등급으로구성 4. 고용허가제한국어능력시험 1) 외국인고용허가제에따라한국에취업을희망하는외국인근로자대상의기초수준능력평가 2) 2005 년 1 회실시 - 4 -
3) 고용허가제양해각서를체결한 15 개국가현지에서실시됨 4) 영역 : 듣기, 읽기 5) 점수 : 200 점만점 ( 평균 80 점이상중에서성적순으로합격자를선정함 ) - 5 -