발 간 사 새로운 아이디어와 지식 창출이 개인과 국가 발전을 좌우하는 지식정보화 사회 에서 교육은 미래 사회가 요구하는 창의적 인재 육성의 책무를 지고 있습니다. 이러한 맥락에서 전통적 지식 전달 위주의 수업이 창의성을 키워주는 수업으로 변화되기 위해서는 무엇보다 평가 방법 개선이 필요합니다. 새로운 아이디어와 지 식 창출을 지향하는 교실 수업이 실시되고 이것이 창의성을 키워주는 평가로 이어 져야 하겠습니다. 그렇게 된다면 교수 학습 활동과 평가가 서로 선순환하여, 학교 교육에 대한 신뢰가 커지게 될 것입니다. 지금까지 여러 선생님들께서 학생들의 창의성과 표현력을 키워줄 수 있는 효과 적인 서술형 평가 문항을 개발하기 위해 부단히 노력해 오신 것으로 알고 있습니 다. 이에 따라 우리교육청에서는 학생들의 창의성 계발을 위해 애쓰시는 선생님들 을 도와드리고자 창의성과 표현력을 키워주는 서술형 평가 장학자료집 을 개 발하여 보급하게 되었습니다. 이 자료집은 국어 영어 수학 과학 사회과 여러 선생님들께서 토의와 연구를 거듭 하여 제작한 문항으로 구성되었으며 현장에서 선생님들이 참고하실 수 있도록 채 점 기준 및 활용의 예도 함께 제시하였습니다. 우수한 서술형 평가 예시 문항을 제공하여 창의성을 자극하는 다양한 형태의 문 항이 출제된다면 기출문제나 참고서 문제 풀이, 정답 고르기 요령 전수 등 소위 학원 효과를 기대하기 어려울 것입니다. 이를 통해 일부 학부모의 맹목적인 사교육 의존도를 낮추고, 공교육의 신뢰 회복에 큰 역할을 할 수 있을 것입니다. 모쪼록 이 자료집이 서울교육의 발전을 위하여 한 걸음 나아가고자 하는 선생님 들의 노력에 보탬이 되었으면 하는 간절한 바람입니다. 2010. 3. 서울특별시교육감권한대행 이 성 희
차 례 제1부 총 론 1. 학교에서의 서술형 평가 내실화 3 2. 국어과 서술형 문항의 출제 원리와 유의점 16 3. 사회과 서술형 평가도구의 특징과 개발의 실제 26 4. 창의성 계발을 위한 평가 개선 기본 계획 35 평가 개선 관련 질의 응답 (Q & A) 43 제 2 부 교과별 평가 문항 분석 국 어 51 사 회 일반사회 88 지리 111 국사 131 수 학 151 과 학 물리 193 화학 205 생물 215 지구과학 226 영 어 237
제 1 부 총 론
제1부 총 론 1 학교에서의 서술형 평가 내실화 당곡고등학교 교장 윤오영 1. 서술형 평가의 내실화 가. 서술형 평가 내실화 필요성 21세기 지식정보화사회를 맞이하여 학교 교육에서도 20세기 산업사회와는 다른 패러다임과 변화가 필요하다. 산업사회 소품종 대량생산 체제에서는 많은 사람이 평균적이고 균일한 일을 해야 했으나, 21세기의 다품종 생산시대에는 창의적이고 개성 있는 인력이 더 필요한 상황이 다. 따라서 단순 지식과 기능을 암기하고 습득하는 것이 중요한 것이 아니라, 널려있는 많은 자료들을 스스로 평가하고 취사 선택하며 이를 분석하고 종합하여 자신의 기존 지식과 함께 융화시켜 스스로의 언어로 표현할 수 있는 고등정신능력이 요구된다. 이런 시대의 변화는 교 육 내용과 방법에서의 변화도 요구하고 있다. 교육평가에서도 그런 시대의 요구를 반영하여 서술형 등의 평가가 강조된 것이라 할 수 있다. 서울특별시교육청에서는 2005년부터 서술형 평가나 논술형 평가를 강조하고 점진적으로 확 대하여 왔다. 연차적으로 전체 배점의 30%로 출발하여 40%를 거쳐 2007학년도부터는 주요 과목의 배점의 50%를 서술형이나 논술형 평가로 출제하도록 지침을 정해 왔다. 1) 학교 현장 에서는 많은 비율의 학교가 정해진 비율의 서답형 문항은 출제를 해오고 있는 편이나, 한편으 로 여러 가지 이유 때문에 단답형이나 완성형의 문항을 다수 출제하여 실질적인 서술형 평가 문항의 배점 비율은 지침에 많이 미달하는 형편이다. 그 이유로는 대개 다음과 같은 것들을 든다. 첫째, 학습자의 응답 곤란도 증가에 따른 성적 저하 우려 둘째, 채점량의 증가에 따른 교사의 업무 부담 셋째, 채점 공정성 시비 발생 가능성 등의 부담 그러나 단답형이나 완성형 문항은 학습자의 고등정신능력을 측정하는 도구로는 적당하지 않으며, 교육 내용이나 방법의 변화를 이끌 수 있는 문항이 아니다. 따라서 기존 지침의 배점 비율 내에서 단답형이나 완성형 문항은 최소화하고 진정한 서술형 평가 문항을 보다 내실있 게 출제할 수 있어야 한다. 이를 통해 지식기반사회에서 요구하는 학습자의 문제해결력 및 창 의력 등이 길러지고, 우리 교육의 질이 향상됨은 물론 나아가 교육의 국가경쟁력이 높아지게 될 것이다. 학교에서 서술형 평가를 내실화하기 위해서는 그것을 기피하게 되는 위의 몇 가지 요소들 을 간과할 수 없다. 우선, 서술형 평가를 확대할 때 나타날 수 있는 성적 저하 현상을 보완하 기 위해서 부분 점수의 부여를 통해 학생들이 서술형 문항에도 정성껏 응답하게 하는 문화와 분위기를 조성할 필요가 있다. 또, 학생들에게 답을 쓸 의욕을 불러일으키도록 응답 곤란도가 낮은 평이한 서술형 문항을 다수 출제할 필요가 있을 것이다. 한편, 채점 업무 부담을 줄이는 1) 국어, 사회, 수학, 과학, 영어 교과의 교과학습평가에서 서술형 평가와 논술형 평가 반영 비율은 총 배점의 50% 이상으로 하되, 구체적인 비율은 각 학교 교과목의 특성과 교과지도의 형편을 고려하여 교과협의회 에서 정한 후 학업성적관리위원회의 심의를 거쳐 학교장이 최종 결정하여 시행한다.(2009학년도 학업성 적관리 종합방안, 서울특별시교육청) - 3 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 것은 쉬운 문제는 아니며 보다 많은 숙고와 아이디어가 필요할 것이다. 채점의 공정성 시비에 서 가장 중요한 것은 신뢰의 문화를 쌓는 것이다. 실제로 학부모들 조차도 교사들이 고의로 채점에서 부정을 저지르는 것에 대한 우려는 크게 하지 않는다. 오히려 객관적이지 못하거나 전문적이지 못한 채점 기준과 불성실한 채점에 대해 우려하는 것이다. 그러므로 신뢰를 구축 하기 위해서는 교사들은 타당도 있는 문제를 출제하고 객관적으로 수긍할 수 있는 채점 기준 을 세울 수 있는 전문성과 정확히 채점하는 성실성이 필요하다. 본고에서는 서술형 평가 문항 출제와 관련하여 교원의 전문성 신장에 도움을 주는 차원에 서 몇 가지를 언급하고자 한다. 나. 서술형 평가의 정의와 특징 일반적으로 정기고사 지필평가 문항을 분류하면 아래 표와 같다. 2) 객관형 주관형 채점자의 주관 개입 정도(채점방법) 진위형(O.X형) 배합형(연결형, 줄긋기형) 선다형 완성형(괄호형) 단구적 단답형 서술형 논술형 최선다형 정답형 다답형 합답형 부정형 채점 기준방식 사례 나열 방식 감점 조건 제시 방식 요소별 배점 방식 학생의 반응 양식 선택형 서답형 여기서 서술형이나 논술형 평가 3) 는 학생으로 하여금 출제자가 제시한 답을 선택 하도록 하 는 평가 방식이 아니라 학생이 답이라고 생각하는 지식이나 의견 등을 직접 서술 하도록 하 는 평가 방식 문항을 말한다. 즉, 서술형이나 논술형 평가는 서답형 평가이면서 상대적으로 학생의 반응의 자유도가 높으면서도 응답해야 할 분량이 많은 평가 문항을 말한다. 과목 성격 과 학년 수준에 따라 다를 수는 있지만 서술형 평가는 적어도 주어와 술어 등이 포함된 하나 의 문장 이상으로 답하도록 하는 문항을 말한다고 할 것이다. 이와 같은 서술형이나 논술형 평가는 학생의 생각이나 의견을 직접 서술하도록 하여 학생 의 창의력, 문제해결력, 비판력, 판단력, 통합력, 정보수집력, 분석력 및 표현력 등 고등 사고 기능을 평가하는 데 유용한 평가 방식이다. 반면, 문항에 반응해야 하는 양이 많으므로 수험 자의 입장에서는 답안 작성이 부담이 되고, 채점자의 입장에서 아무리 객관적인 채점 기준을 세운다 해도 수험자의 다양한 답안을 누구나 수긍할만한 일관된 잣대로 측정하는 것이 어려 운 본질을 가지고 있다. 2) 2009학년도 학업성적관리 종합방안, 서울특별시교육청 3) 서술형 평가 문항과 논술형 평가 문항을 구분하면 다음과 같을 것이다. - 서술형 평가 문항 : 학생이 서술해야 하는 분량이 상대적으로 많지 않고, 채점을 할 때 서술된 내용의 깊이와 넓이 에만 관심이 있는 평가 문항 - 논술형 평가 문항 : 개인 나름의 생각이나 주장을 창의적이고 논리적으로 설득력 있게 조직하여 작성해야 함을 강 조하는 평가 문항 - 4 -
제1부 총 론 다. 서술형 평가의 분류 4) 1) 반응의 허용 정도에 따른 분류 가) 응답 제한형 : 응답의 분량, 내용 범위, 서술 양식을 제한하는 유형 (1) 분량 제한형 : 진술 요소의 수, 답안의 길이(문장 수, 글자 수, 또는 행 수) 등에서 물리적 제한을 가하는 문항유형 ~를 50자 내외로 설명하시오. ~를 네 가지만 쓰시오. ~를 한 문장으로 요약하시오. (2) 내용범위 제한형 : 응답 내용범위에 제한을 가하는 문항유형 ~ 국가 경제적 및 정치적 측면에서 예를 들어 설명하시오. ~ 서술형 시험과 선다형 시험의 차이점을 측정의 목적과 실용성의 견지에서 서술하시오. ~ 갑오 농민 혁명의 역사적 의의를 쓰시오. (3) 서술양식 제한형 : 응답 서술양식에 제한을 가하는 문항유형 ~를 제시하시오. ~에 대하여 예를 들어 설명하시오. 나) 응답 자유형(확대 반응형) 남여간의 임금격차와 업종에 따른 임금격차의 관련성을 논하시오. 대개 중 고등학교에서는 일반적이고 포괄적인 주제를 주고 의견을 쓰게 하는 것보다는 학생 이 학습한 내용에서 적당한 정보를 재생하고 이를 적절히 조직하여 합당한 답을 하도록 하는 구체적인 문제를 출제하는 것이 바람직하다. 또, 채점의 신뢰도 및 공정성 확보에도 유리하기 때문에 응답 자유형보다는 응답 제한형이 권장되고 실제로 많이 출제한다. 그러나 한편으로는 응답자유형 문항은 창의성과 표현력 측정에 유리하다는 장점도 있다. 2) 자료 제시 여부에 따른 분류 가) 자료 제시형 : 문항에 글이나 그림, 도표 등의 자료를 제시하고 이를 근거로 응답하도록 하는 문항 형태 나) 단독 과제형 : 자료나 정보를 제시하지 않고 특정 질문에 응답하도록 하는 문항 형태 일반적으로는 자료 제시형은 응답 제한형과 연관되고 단독 과제형은 응답 자유형과 연관된 다. 학교에서는 출제의 편의를 위해 단독 과제형도 많이 출제하나, 고등정신능력을 측정하는 서술형 문항으로는 자료 제시형이 바람직한 경우가 많다. 대학 입학시험으로 출제되는 논술고 사도 다수의 경우가 자료 제시형으로 많은 비중을 차지해 오고 있다. 4) 이하 3 의 다 까지의 내용 중 상당 부분은 양길석의 서술형 논술형 문항의 제작 (2005 서술형 논술형 예시 문항 자료집, 서울특별시교육청)의 내용을 기초로 한 것임 - 5 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 라. 서술형 평가의 장 단점 1) 서술형 평가의 장점 가) 고등정신기능 측정에 효과적이다. 표현력, 사고력, 문제해결력 신장과 같은 일반적 교육목표와 개념 혹은 원리의 적용 같은 구체적 학습목표를 쉽게 평가할 수 있다. 이러한 고등정신기능은 잘 만든 선택형 문항으로도 측정할 수는 있으나 그런 문항 을 제작하기가 어려운 편이다. 나) 교육적 측면에서 학습자의 학습태도를 개선해 준다. 선택형 문항에서는 대부분 인 지나 재생반응을 요구하기 때문에, 학생들은 대개 교과서나 참고서의 중요내용 또 는 참고서의 선택형 연습문제를 암기하는 경향이 있다. 반면 서술형 문항은 개념 이나 원리적용을 측정하는 경우가 많다. 뿐만 아니라 원리를 찾아 조직하고 자신 의 말로 표현해야 한다. 따라서 학생들은 개념을 활용하고, 정의를 내리고, 원리를 찾아보고, 원리를 적용해 보는 학습활동으로 바람직한 지적 기능을 학습하는 태도 를 기르게 될 것이다. 다) 문항 제작 측면에서 볼 때, 문항제작이 비교적 쉽다. 좋은 서술형 문항을 만들기 위해서도 상당한 노력이 필요하지만 답지를 만들 필요가 없으므로 선택형 문항 제 작에 비하면 시간과 노력이 적게 든다. 그러나 좋은 선택형 문항에서 답지만 없앤 다고 해서 곧바로 좋은 서술형 문항이 되는 것은 아님에 유의해야 한다. 2) 서술형 평가 문항의 단점 가) 채점의 객관성이 낮다. 이는 본질적인 문제로 채점 기준을 아무리 정교하게 작성해 도 수험자가 자유롭게 답한 답에 대해 누구나 수긍하는 일관되고 객관적인 채점을 하는 데는 한계가 있을 수밖에 없다. 이것을 극복하는 방법으로는 복수의 채점자가 각각 별도로 채점한 후 평균 점수를 부여하고 채점자들 사이에 의견의 차이가 심하 게 나는 답안에 대하여는 협의 채점하는 방안이 제시될 수 있을 것이다. 나) 채점에 시간과 노력이 많이 든다. 다) 문항표집수가 제한된다. 한 문항에서 긴 반응을 요구하는 까닭에 제한된 시간에 평 가가 이루어지는 학교 시험에서는 서술형 평가로 몇 개의 문항밖에 출제하지 못한 다. 한 시험에서 몇 개의 문항으로 학습목표를 모두 평가하기는 어렵다. 자칫 측정 을 못하는 학습목표가 생기고 나아가서는 시험 전체의 타당도와 신뢰도도 낮아지 게 된다. 이 문제를 개선하는 방법은 문항 제작 과정에서 반응의 자유도를 어느 정도 제한하고, 비교적 짧은 반응을 요 하는 문항을 만들어 문항 수를 늘리는 것 이다. 따라서 문항 수가 많으면 보다 많은 학습목표를 평가할 수 있게 된다. 그리 고 현실적으로 학교 시험에서는 선택형 문항도 상당 부분 포함되므로 이 문제는 충분히 극복될 수 있을 것이다. 2. 학교에서의 서술형 평가 문항의 제작 가. 좋은 평가 문항 제작자의 자세 다음은 서술형 문항 뿐 아니라 선다형을 포함한 전반적인 평가 문항 제작에서 좋은 문항 제작자가 되기 위해 구비해야 할 조건과 이를 갖추기 위해 학교 상황에서 교사가 수행해볼만 한 활동을 권장한 것이다. - 6 -
제1부 총 론 1) 평가하려는 교과목에 대한 충실한 이해 가) 교과의 교육목표와 각 교육 내용 그리고 교수 및 학습 원리 등이 무엇이며 어떻게 연계되어 있는지, 교과서는 이를 어떻게 반영하고 있는지 등을 분석해본다. 나) 교과 내용(사실이나 원리, 개념 등)이 학교급 간, 학년 간, 교과목 내 단원 간 혹은 교과목 간에 어떤 체계를 이루고 있는지, 어떤 관련성을 가지고 있는지 등을 분석 해본다. 다) 학습 과정에서 자주 나타나는 오류나 오개념 등이 무엇인지를 정리해 본다. 라) 교과 내용에서 서술형 평가 대상이 될 수 있는 부분이 어떤 것인지 분류해 본다. 마) 담당 교과 관련 학술지, 기타 간행물의 구독과 세미나 및 학술 대회 참여 등을 통 하여 학문적 변화와 발전 내용을 수시로 습득한다. 2) 평가받는 학생에 대한 충분한 이해 가) 학생의 인지 및 학습 발달 수준을 파악한다. 나) 학생의 어휘 수준이나 그들이 주로 사용하는 어휘들을 파악한다. 다) 학생들이 어려워하거나 쉬워하는 문항들의 특성을 파악한다. 3) 문항 제작에 대한 기본 지식과 기능 가) 문항 제작 관련 지식과 기능을 숙지하고 이를 적용해 본다. 나) 검사 이론을 숙지하고 그에 따라 검사 결과를 분석해 본다. 다) 유창하고 명료한 언어구사력과 문장력을 기른다. 라) 문항에 대한 아이디어가 떠오르면 즉시 이를 메모하고 시간적 여유가 있을 때 질 문과 답지로 전환하는 연습을 한다. 4) 풍부한 문항 제작 및 검토 경험 가) 일과 중에 문항을 제작하고 검토하는 시간을 정기적으로 할애하고 이를 실천해 본 다. 나) 다른 사람이 작성한 문항을 검토하면서 표현이 부적절한 것을 찾아보고, 동료 교사 와 정기적인 문항 제작 검토 협의회를 구성 운영해 본다. 다) 지역이나 국가 차원의 출제 업무에 능동적으로 참여해 본다. 라) 자신이 작성한 글이나 문항을 다른 동료 교사 특히 국어 교사에게 검토 받는 과정 을 거친다. 이때 타인의 조언이나 의견에 귀 기울이는 자세를 견지하려 노력한다. 나. 서술형 문항 제작시 유의 사항 서술형 문항을 제작할 때는 서술형 문항의 특징과 장 단점을 잘 이해하여 특징과 장점을 살 릴 수 있고 단점을 최소화할 수 있는 문항을 제작하려 노력해야 할 것이다. 1) 평가하려는 학생 집단의 인지 및 학습 발달 수준을 고려해야 한다. 문항 내용, 지시 문 등의 어휘 수준이 학생의 수준에 적합하고 적절한 문항수와 응답 시간을 배려해 야 한다. 2) 단순 암기 위주의 지식보다는 고등정신능력을 측정하도록 한다. 내용 선정부터 문항 구조까지 서술형 평가의 성격을 십분 살려서 단순 지식 측정을 위한 문항이 되지 않 도록 제작하여야 한다. 3) 가급적 구체적인 학습 결과를 측정할 수 있도록 질문을 구조화시키고 제한성을 갖도 록 하여 수험자에게 문항의 출제의도가 잘 전달되도록 출제해야 한다. 서술형 평가 - 7 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 문항은 문항 제작 측면에서 매력적인 오답지가 요구되는 선다형에 비하여 비교적 용 이한 편이나, 그만큼 문두에서 답을 쓸 방향을 제시해 주는 것이 필요하다. 문항이 요구하는 영역을 규정하고 제한하며 이것을 잘 구조화시켜 너무 모호하고 일반적으 로 되지 않도록 할 필요가 있다. 반응의 자유도를 허용하되 답의 표현은 이곳으로 라는 방향을 지시해 주는 문항이 되어야 한다. 4) 문항을 제작할 때는 반드시 미리 예시 답안을 작성해 보아야 한다. 학교 현장의 정기 고사에서는 문항만 출제하고 예시 답안을 제시하지 않는 경우도 있는데, 출제자가 쓰기 어렵다고 느끼는 문항의 답을 수험자가 쓰기는 더 어려운 것이다. 출제자가 답 안을 작성해 보면 문항의 오류 가능성을 배제할 수도 있고, 출제자의 의도가 더 잘 드러나도록 문두의 표현이나 제한점을 더 정교하게 수정할 수도 있다. 실제로 답안 을 작성해 보면 문항에 답하기 위해 필요한 자료는 무엇이며, 어떻게 답안을 조직하 는 것이 타당하고 바람직한지 생각할 수 있으므로 채점 기준 설정의 방향도 정교화 할 수 있다. 아울러, 검토자가 답안과 함께 문항을 검토하면 문두의 지시 방향이 옳 게 표현되었는지도 세밀히 검토할 수 있다. 5) 가능하면 채점 기준 및 문항 점수를 미리 제시한다. 예를 들어 논증 문항의 경우, 결 론 도출에 몇 점, 논증의 타당성에 몇 점, 분량에 몇 점 등을 배분하고 이를 미리 제 시함으로써 학생의 반응을 한 곳으로 방향 짓게 하는 데 도움이 될 뿐만 아니라, 수 험자가 어떻게 반응하는 것이 유리한 것인지 알리는 데도 도움이 된다. 이와 관련하 여, 서술형 문항의 경우에도 소문항들을 이용한 단계형 문항으로 제작하면 수험자가 최종적으로 답에 이르게 되는 사고 과정에 시사점을 줄 수 있으며, 이를 통해 수험 자의 반응 의욕도 높일 수 있고 채점의 신뢰도도 제고할 수 있다. 6) 논쟁을 다루는 문항은 어느 한편의 견해를 지지하는 입장에서만 논술하라고 지시하 지 말고, 학생 자신의 견해를 밝히고 그의 견해를 논리적으로 전개할 수 있도록 유 도하여야 한다. 다. 채점 기준 설정 및 채점 관련 유의 사항 1) 부분점수는 더 중요한 과정에 많이 부여하여야 한다. 더 중요한 과정을 수행한 학생 이 덜 중요한 과정을 수행한 학생보다 점수를 적게 받는 일이 없도록 세심하게 설정 하여야 한다. 2) 고등정신능력 측정에 배점의 비중을 집중해야 한다. 중요한 사고력, 고등정신능력측 정에 배점의 비중을 집중하고 사소한 실수에는 대범하도록 채점 기준을 작성하는 것 이 바람직하다. 예를 들어 영어 장문을 읽고 이의 요지를 우리말로 옮기는 문항에서 한글 맞춤법의 사소한 오류는 감점하지 않는 방안도 생각해 볼 수 있다. 3) 채점 기준은 포괄성(망라성)과 배타성의 원칙을 준수해서 작성해야 한다. 포괄성이란 어떤 답안이라도 그에 해당하는 점수 부여 기준이 마련되어 있어야 한다는 의미이 며, 배타성이란 예를 들어 한 가지 답안을 3점으로도, 5점으로도 볼 수 있는 채점 기준은 없어야 한다는 의미이다. 4) 단계별 누적 점수 부여 방법 보다는 요소별 채점 기준이 더 바람직하다. 수학 등의 과목에서 단계별로 처음부터 누적하여 점수를 부여하는 방식의 채점 기준에서는 전 체 과정을 잘 이해하고 수행하였지만 처음 단계에서 아주 사소한 실수를 하여 정답 - 8 -
제1부 총 론 과 다른 답을 얻은 학생은 부분점수를 전혀 받지 못하게 되는 데 비하여, 중간까지 는 제대로 이해해서 바르게 썼지만 그 이후 과정은 전혀 수행하지 못한 학생은 중간 부분점수를 받게 되는 불합리한 현상이 발생할 수 있다. 따라서, 각 단계 요소별로 각각 채점한 후 합산하는 채점 기준이 바람직하다. 5) 논술형 문항의 경우에도 요소별로 배점한 후 합산하도록 한다. 답안 전체의 완성도에 대하여 일괄 배점을 하는 기준보다는 여러 가지 요소에 대하여 단계별로 배점한 후 합산하는 분석적 채점 기준을 수립하는 것이 합리적이다. 6) 채점 기준은 점수를 주려는 자세로 작성하는 것이 바람직하다. 점수를 주지 않으려는 부정적인 시각으로 채점을 하는 것은 특별한 경우를 제외하고는 바람직하다 볼 수 없을 것이다. 선택형 문항과는 달리 서술형 평가는 과정을 평가할 수 있다는 점이 장점이다. 선택형에서 틀린 답은 그 과정을 전혀 알 수가 없어서 학생들이 거의 문 항의 풀이에 거의 접근했지만 마지막 순간의 잘못으로 오답을 했더라도 구제할 길이 없다. 서술형에서는 부분 점수를 부여할 수 있어서 이런 점을 세밀히 관찰하여 적절 한 보상을 해줄 수 있는 점이 바로 장점이고 이 장점을 살려야 할 것이다. 7) 채점할 때는 학생 단위 채점 보다는 문항 단위 채점을 해야 한다. 즉 1반 1번 학생 이 답안지를 1번 문항, 2번 문항, 의 순으로 모두 채점한 후 2번 학생의 답안지를 같은 순으로 채점해 나가는 것보다는 1번 문항에 대하여 1번 학생, 2번 학생, 의 순으로 채점해야 채점의 일관성을 유지할 수 있고 신뢰도를 높일 수 있다. 라. 문항 및 채점의 신뢰도 확보 서술형 문항은 수험자의 반응의 자유도가 높고 채점자의 주관이 개입할 요소가 많기 때문 에 본질적으로 선택형 문항보다는 신뢰도에서 약점을 가질 수밖에 없다. 그렇다고 하더라도 출제자가 측정하고자 하는 내용을 아는 수험자는 제대로 답할 수 있고, 그렇지 않은 수험자는 답을 하기 어려운, 즉 신뢰도가 높은 문항을 출제하도록 노력하여야 한다. 그러나 잘 제작된 문항이라면 잘 답할 수 있는 학생이 출제 의도를 오해하고 답을 작성해야 할 방향을 찾지 못 해 점수를 받지 못하거나 객관적으로 판단되는 것보다 훨씬 많은 점수를 감점되었을 때, 그 문항은 측정의 신뢰도에서 매우 부족한 문항이 될 수밖에 없을 것이다. 출제 교사의 전문성의 부족이나 검토 부족으로 야기되는 어쩌면 사소하다고 볼 수 있는 이런 사례들로 인해 교사의 전문성에 대한 학생이나 학부모들의 신뢰는 실추되고 신뢰가 부족한 문항이 있으면 다른 문 항으로까지 민원이나 항의의 대상이 확대되어 교사의 업무 부담은 더 늘어날 수밖에 없게 된 다. 서술형 문항은 분명 교육적으로 바람직하다. 따라서 서술형 문항이 객관도나 신뢰도의 약점 을 가지더라도 그 약점을 최소화하면서 출제 비중을 확보해 나가야 할 것이다. 위에서 말한 것과 같이 신뢰도를 높이는 첫 번째 관건은 각 교사가 전문성을 제고하는 것이다. 아울러, 채점의 오류 등을 막기 위하여 복수 채점이나 공동 채점 등을 거쳐 신뢰성을 확보 해 나가고 이의 신청에 대한 절차를 마련하여야 할 것이다. 교사들의 이러한 전문성 확보와 노력이 전제되었을 때 고의가 아닌 실수에 의한 채점 등의 오류 사례 등도 간단한 이의 신청 및 처리 절차를 통해 신뢰를 잃지 않고 바로 잡을 수 있을 것이다. - 9 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 3. 학교에서의 서술형 평가 문항의 검토 사례 가. 선다형 문항을 서술형 문항으로 단순히 변형 출제한 사례 (원래의 선다형 문항) 한강, 금강, 영산강의 공통점은? 1 동쪽에서 발원하여 서쪽으로 흐른다. 2 서쪽에서 발원하여 동쪽으로 흐른다. 3 남쪽에서 발원하여 북쪽으로 흐른다. 4 북쪽에서 발원하여 남쪽으로 흐른다. 5 서쪽에서 발원하여 북쪽으로 흐른다. [답] 1 (서술형 문항으로 바꾼 문항) 한강, 금강, 영산강의 공통점을 쓰시오. [답] 동쪽에서 발원하여 서쪽으로 흐른다. <검토 의견> 이 문항은 선택형 문항의 답지를 없애고 서술형으로 출제한 문항이다. 첫째, 이 문항이 고등정신능력을 측정하기 위한 서술형 문항으로 적합한가라는 평가 내용 선정의 적절성에 대한 의문을 가질 수 있다. 둘째, 이 서술형 문항에서 극단적으로 물이 흐르는 강 이라고 답하면 어떻게 채점할 것인가? 출제가가 의도하는 답을 요구하려면 흐르는 방향과 관련 이라는 표현 이 필요할 것이다. 실제 평가 장면에서 학생들은 출제자와 오로지 문제지에 씌 여 있는 문장만으로 대화하게 된다. 선택형 문항에서는 답지 라는 장치가 있어 서 문두가 다소 모호하여도 답지로부터 출제의도를 파악할 수 있지만 서술형, 논술형 문항은 답지가 없으므로 더욱 세심하게 문두를 작성하여야 한다. 나. 불명확한 문두로 학생들이 출제자의 출제의도를 파악하지 못하여 출제자가 요구하는 답을 잘 하지 못하는 경우 (예2) 다음의 어느 연구기관의 예상이 현실화되었을 때, 우리의 수출과 수입에 미치는 영향을 간략히 쓰시오. 내년도 원 달러 환율이 800원대까지 낮아질 수 있다는 전망이 나왔다. 현대경제연구 원은 18일 2007년 달러화 약세 기조 지속 전망 이라는 보고서에서 주요 투자은행들이 최근 발표한 2007년 엔 달러 환율 전망에 현재의 원 엔 환율을 적용하면 내년 원 달 러 환율이 800원대에 진입할 가능성이 있다고 밝혔다. 특히 미국의 압력에 따라 위안 화가 비교적 큰 폭으로 절상되면 원 달러 환율 하락 속도도 더욱 빨라질 것으로 연구 원은 내다봤다. [모범답안] 수출품의 가격 경쟁력을 떨어뜨려 수출에 부정적으로 작용하며, 수입품의 가 격 경쟁력을 강화시킴으로써 수입 증가를 초래한다. <검토 의견> 이와 같은 문항의 경우 학생들은 답을 대부분 수출 감소, 수입 증가 라고 쓸 것이다. 출제자가 의도하였던 왜 수출이 감소하고 수입이 증가하는지 를 쓰지는 않을 가능성이 크다. 만약 문두의 말미를 가격경쟁력과 관련하여 설명하시오 라고 고치면, 출제자가 의도하였던 답안을 기대할 수 있을 것이다. - 10 -
제1부 총 론 다. 예시 답안이 문항과 조응하지 않거나, 공정하지 못한 경우 (예3) 다음 글을 읽고 태어날 아이의 성 결정에 관한 우리 조상들의 행동을 생물학적 관점에서 논하시오. 우리나라 야외에 있는 비석 비문을 자세히 살펴보면 글씨들이 파여 볼 수 없는 글 자들을 자주 발견하게 된다. 풍우에 씻겨서가 아니라 아들을 낳고 싶고 뱃속 아이를 아들로 바꾼다는 우리 조상들의 집요한 염원에서 나타난 훼손이다. 비문 가운데 남 성과 관련된 글자, 이를테면 아들 子, 사내 男, 글월 文, 날쌜 勇, 호반 武 등 사내를 나타내거나 사내 속성을 나타내는 비자들을 파 그 돌가루를 물에 타 마시면 아들을 배고 밴 아이 상별을 사내로 바꿀 수 있다고 여겼던 것이다. 들판에 서 있는 돌부처 나 미륵상에 오뚜해야 할 코가 모조리 납작코가 되어 있음도 같은 이유다. 경주 남 산에 있는 그 많은 돌부처 가운데 코가 남아 있는 불상을 거의 찾아볼 수 없음도 그 때문이다. 돌부처나 돌미륵 코를 떼어 이를 가루로 만들어 마시면 남성의 주력을 얻 어 역시 아들을 배고 아들로 성전환할 수 있을 것으로 알았던 것이다. [답] 태아의 성 결정은 수정되는 순간에 확률적으로 이루어진다. 즉, 성염색체 X를 갖는 난 자에 X 염색체를 갖는 정자가 수정되면 딸이 되고, Y 염색체를 갖는 정자가 수정되면 아들이 된다. 따라서 돌가루를 마시면 아들을 밸 수 있다고 믿은 조상들의 생각은 생물 학적으로 잘못된 것이다. <검토 의견> 지문에 있는 내용은 수태 과정 뿐 아니라 이미 수태된 태아의 성전환 가 능성도 언급하고 있는데, 모범 답안에는 이것을 드러내고 있지 않다. 모범 답안의 마지막 문장을 돌가루를 마시면 아들을 밸 수 있고 밴 아이 성별을 아들로 전환시 킬 수 있다고 믿은 조상들의 생각은 생물학적으로 잘못된 것이다 와 같이 수정하는 것이 바람직할 것이다. 이런 문항의 결함은 출제자가 답을 미리 작성해 보지 않았든 지 그 부분에 대한 검토의 전문성이나 성실성이 부족했기 때문에 발생한다. 라. 채점 기준이 중요하지 않는 부분을 강조하거나 점수를 주려는 자세가 아닌 경우 (예4) <상당한 분량의 영문 지문 생략> 위의 글을 읽고 글쓴 이가 주장하는 핵심을 위 의 글에서 찾아 하나의 영어 문장으로 쓰시오. [10점] [답] It is important having an atmosphere in which people actually feel comfortable about using break. [상황] 영어 지문에는 답에 해당하는 것이 긴 문장의 중간 부분에 나와 있으며 지문에 나와있는 첫 단어의 첫 글자는 당연히 소문자이다. 그런데, 채점과정에서 문장의 첫 글자를 대문자로 쓰지 않고 it~으로 시작했을 뿐 나머지는 모두 맞는 답도 완전한 문 장이 아니라는 이유로 0점 처리하였다. <검토 의견> 이 문항에서 측정하는 중요한 능력은 글의 핵심을 파악하는 능력이다. 비 록 첫 문장의 첫 글자를 대문자로 쓰지 않아 완벽한 문장이라고 할 수는 없지만 그 것은 아주 사소한 실수를 한 것에 불과하다. 이 경우 0점을 주는 것은 전혀 내용을 파악하지 못한 학생과 같은 취급을 당하는 것이 되어 서술형 평가의 장점을 전혀 살리지 못한 처사이다. 첫 글자를 소문자로 썼을 뿐 나머지 내용은 다 맞은 답이라 면 거의 만점에 가까운 부분점수를 줄 수 있을 것이다. - 11 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 (예5) 연립방정식 [답] (풀이 과정은 생략) 또는 의 해를 의 범위에서 구하시오. [10점] (단, 육십분법으로 또는 와 같이쓰면3점감점) <검토 의견> 이와 같은 문항의 경우 왜 답을 육십분법으로 쓰면 감점하는가? 육십분법 을 호도법으로 고치는 것이 중요한 성취목표이고 평가기준일 때는 그러할 수 있으 나, 본 문항은 고3 미분과 적분 문항으로 방정식을 푸는 것이 주요한 성취목표이 다. 채점 기준은 점수를 깎으려는 자세보다는 점수를 주려는 자세로 작성하는 것이 더 바람직하다. 만약 육십분법으로 쓰면 감점할 필요가 있는 경우에는 문두에 호도 법으로 답하라 는 단서가 필요할 것이다. 마. 채점 기준이 명료하게 작성되지 않은 경우 (예6) 다음 글에 나타난 사회 문화 현상을 바라보는 관점을 쓰고 그 관점에 대한 비판을 2가지 서술하시오. (2가지 이상을 서술할 경우 앞의 것 2개만 가지고 채점함- 6점) 성 차별이 생겨난 것은 사회의 조화로운 생존 및 발전과 깊이 관련되어 있다. 우리가 일상 생활에서 흔히 볼 수 있는 성 차별도 나름대로 사회 전체의 조화와 균형의 한 부분인 셈이다. 사회에는 남성에 의해 수행되어야 할 역할과 여성에 의 해 수행되어야 할 역할이 각각 존재하는데, 그것들을 효율적으로 달성하기 위하여 성 역할을 분화시키는 것은 합리적이다. [예시 답안] 기능론적 관점에 해당하며 기능론적 관점은 질서와 균형을 강조하고 체제 의 안정을 중시하기 때문에 사회변화를 비정상적인 것으로 보며, 급진적인 문화 변 동 현상을 설명하기 어렵다. [채점 기준] 기능론적 관점임을 밝히고 비판 내용 2가지를 바르게 서술하였다.(6점) 기능론적 관점임을 밝혔으나 비판 내용은 1가지만 바르게 서술하였다.(4점) 기능론적 관점임을 밝혔으나 비판 내용은 서술하지 못하였다.(2점) 기능론적 관점임을 밝히지는 못하였으나 비판 내용 2가지는 바르게 서술하였다.(4점) 기능론적 관점임을 밝히지는 못하였으나 비판 내용 1가지는 바르게 서술하였다.(2점) <검토 의견> 채점 기준이 산만하여 채점하는데 어려움이 따른다. 다음과 같이 채점 기 준을 명료하게 바꿀 필요가 있다. 1 바라보는 관점을 바르게 서술하였는가? [2점] -기능론적 관점임을 서술하였다. : 2점 2 그 관점의 문제점 2가지를 바르게 서술하였는가? [4점] -기능론적 관점의 문제점 2가지를 바르게 서술하였다. : 4점 -기능론적 관점의 문제점 1가지를 바르게 서술하였다. : 2점 - 12 -
제1부 총 론 4. 학습 내용과 방법의 변화를 유도하는 평가 가. 학습하는 자세와 평가 문항 일반적으로 교육의 성과를 측정하는 것이 평가이다. 그러나 평가가 어떻게 이루어지느냐는 것이 거꾸로 교육의 내용과 방법의 변화를 이끌어 내기도 한다. 비단 우리나라만 그러한 것은 아니지만 상급학교 진학열이 높은 우리나라에서는 그 정도가 특히 강하다고 할 수 있을 것이 다. 이런 측면에서도 고등정신능력 측정에 적합한 서술형 평가를 통해 21세기 지식 기반 사 회를 대비한 교육의 내용과 방법의 바람직한 변화를 이끌어 낼 수 있을 것이다. 서술형 평가 문항의 장점 중 가장 중요한 것이 학생들의 학습 태도를 개선해 준다는 것이 다. 선택형 문항에 길들여진 학생들은 단순 지식의 암기나 기능의 반복 연습을 학습이라고 생 각할 수 있는 반면, 서술형 문항 평가에 노출될 기회가 많은 학생들은 그것을 통해 표현력을 기르는 활동의 기회도 갖게 되며 나아가 표현력의 구성능력인 논리적 사고, 종합력, 비판적 사고 등을 학습할 필요를 느끼고 그 능력을 키우려 노력할 것이다. 서술형 문항이 강조되는 것이 바로 이 때문이라 할 것이다. 서술형 문항은 수험자가 답해야 할 분량이 많은 등의 부담으로 성적 저하가 우려되고 쓰 기 능력이 부족한 학생에게 불리하다는 의견도 있다. 그러나 서술형 평가의 목적 중 하나는 사고력, 문제해결력 등 고등사고능력의 신장과 더불어 학생이 자신의 생각을 글로 표현하는 능력의 향상에도 있으므로, 교수 학습방법의 개선 등을 통하여 표현력을 향상시켜 나가야 할 것이다. 또, 서술형 평가 문항은 난이도가 높다는 편견을 타파하는 것이 필요하다. 평이한 수준의 서술형 평가 문항을 더 많이 출제하도록 노력함으로써 수험자들이 쉽게 응답할 수 있도록 해 야 할 것이다. 이러한 서술형 평가가 지속적으로 실시되어 성적을 받기 위해서는 답을 써야 하는 것이 당연하게 여겨지게 되면 향후 학생들이 가지는 체감 부담은 우려보다 작아질 수 있을 것이다. 나. 창의성 신장과 서술형 평가 지식 기반 사회에서 요구되는 중요한 지적 특성 중 하나는 창의성이다. 창의성은 새로움 (novelty)와 적절성(appropriateness)의 두 측면을 모두 동시에 만족하는 인지과정으로 정의 하기도 하며, 사회문화적 맥락에서 가치 있고 실현 가능한 독창적 사고나 산출물을 만들어 낼 수 있는 능력으로 정의하기도 한다. 과거 영재교육에서 주로 중요시되던 창의성은 이제 모 든 학생에게 길러주어야 할 덕목으로 확대되고 있다. 창의성은 똑 같은 결과를 얻더라도 그 결과를 얻어내는 과정에서 많이 발현되므로 지필 평가보다는 수행평가가 측정에 더 적합한 도구라고 할 수 있다. 또, 서술형 평가는 창의성보다는 자기표현력 측정에 더 용이한 평가 도 구라는 의견도 있다. 그러나 지필평가를 통해서도 질높은 사고력을 측정하는 것이 가능하며, 지필평가 중에서도 서술형 평가는 결과 뿐 아니라 사고 과정을 평가하는 도구로서 유용하다. 또 수행평가가 드러 나는 행동을 위주로 평가한다면 서술형 평가는 사고과정을 평가할 수 있으므로 어떤 의미에 서는 창의성 평가에 더 적절한 도구일 수도 있다. 또한 서술형 평가로 측정하는 것이 바람직 - 13 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 한 고등정신능력 중 하나가 창의성이므로 서술형 평가를 적절히 활용하면 학생들의 창의성을 부분적으로라도 평가할 수 있을 것이다. 서술형 평가에 익숙해지면 학생들은 시험에서 높은 점수를 얻기 위해서 보다 창의적인 사고를 하는 습관을 들이게 될 것이다. 아직은 영재를 대상으로 하는 창의성 평가 문항도 많이 개발되지는 않은 상황인데, 영재만 이 아닌 모든 지적 수준의 학생들을 대상으로 하는 창의성 측정 문항은 보다 더 많은 연구를 거쳐 개발되어야 할 것이다. 그러나 문항 개발은 일선 학교 교사들에게도 충분히 가능한 영역 이라고 생각한다. 창의성을 신장시키는 데 도움이 되는 평가는 많은 경우 열린 문항, 범교과적 문항 등의 형 식을 띤다. 문항이 평가하고자 하는 요소가 비록 창의성은 아닐지라도 신선하고 창의적인 소 재나 형식으로 제시된 문항이라면 학생들의 창의성을 자극하고 신장시키는 데 간접적으로는 도움이 될 수 있을 것이다. 다. 제언 서술형 평가를 정착시키기 위해서는 무엇보다도 교사의 전문성 신장이 최우선이 되어야 한 다. 이를 위해 교육청에서는 교사의 전문성을 신장시킬 수 있도록 실질적인 연수나 예시 문항 자료 개발 보급 등을 통해 적극 지원해야 한다. 동시에 교사의 전문성을 신뢰하는 분위기가 조성되어야 한다. 우리나라 교육 문화에서 학점을 매기기 위한 대학의 시험에서는 교수의 채 점에 대한 이의가 별로 없지만 고등학교 이하의 학교의 시험에서는 채점에 대한 이의와 민원 이 빈발하고 많은 교사는 이것을 이유로 서술형 평가를 보다 객관적인 채점 기준이 가능한 단답형이나 완성형 문항으로 대체해 왔다. 그러나 뒤집어 생각하면 고교 이하의 학교에서도 진정한 서술형 평가를 확대해 간다면 그것이 교사의 채점을 신뢰하고 적어도 민원 제기를 자 제하는 문화를 만들어 갈 수 있는 계기가 되지 않을까도 생각한다. 그동안 학교에서 운영해 본 경험에 의하면 응답 분량이 많고 자유도가 높은 문항의 경우에 채점에 대한 민원은 커녕 이의 신청 조차 별로 많이 발생하지 않았다고 한다. 특히, 전문성을 갖춘 교사가 출제한 경우 는 이의 신청도 거의 없었다는 것이다. 한편, 서술형 평가에 따르는 교원들의 부담을 줄이고 기피하지 않도록 지원하는 방안도 강 구해야 한다. 교사들의 변화 기피를 탓하기 앞서 교육청에서도 그 장애 요인들을 최소화하려 는 지원 노력도 필요할 것이다. 교육청 등에서는 주관성이 개입되는 평가라는 점을 악용하는 고의적 비리는 엄단해야 하지만, 고의적 비리가 아닌 사안 발생시에는 교사들의 채점 전문성 을 인정해 주고 교사를 보호하는 시스템을 구축할 필요가 있다. 그것이 교사들이 서술형 평가 문항 출제를 적극적으로 할 수 있게 교사의 역량과 의지를 북돋울 수 있는 길일 것이다. 아울러, 서술형 평가 내실화에 따른 사교육의 영향을 최소화하기 위한 노력도 필요하다. 한 가지 방법은 학습의 결과 뿐 아니라 학습 과정을 문항으로 출제함으로써 사교육으로 얻어진 능력보다는 수업 참여도가 높은 학생이 보다 높은 성취를 보일 수 있는 문항을 출제하려 노 력하는 것이다. 나아가, 교사들은 평가 방법의 개선에 그치지 않고 교수-학습의 전 과정을 지식 기반 사회 에 알맞은 방향으로 개선하려는 노력이 전개되어야 할 것이며, 이를 지원하기 위한 학교 차원 이나 교육청 차원의 노력도 반드시 필요할 것이다. - 14 -
제1부 총 론 5. 부록 : 서술형 평가 문제지 편집 지침 (1) 문항의 어미는... 시오 혹은... 하라 의 종결어를 사용하며, 한 문제 지 안에서는 종결어를 통일하여 사용함 선다형 문항에서는 일반적으로...은? 혹은... 인 것은? 과 같이 불완전 문 장으로 종결함 (2) 소문항이 있는 경우에는 그 소문항이 속하는 대문항의 번호에 연결하여 문항번호를 부여하 며, 문항 끝에는 해당 배점을 표기함 [예] 서술형1. -----이 말하고자 하는 교육적 시사점을 쓰시오. (5점) 서술형2. ------ 다음의 물음에 답하시오. (총 5점) 2-1. -------에 대해 10자 이내로 쓰시오. (2점) 2-2. -------이 의미하는 바를 쓰시오. (3점) (3) 문제지와 답안지 양식은 가급적 문항 바로 아래 직접 답을 쓰게 하는 문제지 답안지 통합 형 (문제지는 단면 인쇄)을 권장함. 이 경우 답란의 여백을 충분히 주어야 함. 그러나, 선택 형 문항과 일부 서답형 문항을 혼합하여 검사를 실시하는 경우에는 별도의 답안지를 마련 하는 것이 효율적일 수 있음 (4) 요소를 나열하도록 하는 문항에서 요구하는 요소의 수보다 더 많이 답했는데 오답이 있어 채점 기준을 설정하기 어려울 수 있으므로, 문항에서는 가지(만) 제시하시오 라고 한정하 고, 답안지를 구조화하여 요구하는 요소의 수 이내만 적을 수 있도록 하는 것이 바람직함 [예] 서술형1. ~의 이유를 3가지만 쓰시오. (6점, 각 2점) [답안지] - 15 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 2 국어과 서술형 문항의 출제 원리와 유의점 한국교육과정평가원 정구향 1. 국어과 교육의 과정과 학습 평가 평가 활동은 교육 목적에 근거하여 교육의 과정 또는 결과가 어느 정도의 교육적 효과를 거두었는 지를 판단하기 위한 교육의 한 과정으로 인식되어야 한다. 따라서, 평가 활동은 전체 교육의 과정에 서 볼 때 독립 변인으로 존재하는 것이 아니라 교육의 목표와 내용 그리고 교육의 과정의 종속 변인 으로 인식되어야 한다. 그러나 국어과 평가 현상을 면밀하게 관찰해 볼 때, 평가 활동을 교육의 목표와 내용, 그리고 결과 에 영향을 미치는 독립 변인쯤으로 인식하고 평가 활동을 계획 실천해 왔다고 할 수 있다. 평가의 형식면에서 아직도 5지 선택형이 권위를 인정받고 있으며, 단순 암기력을 요구하는 문항이 점차 고 등 수준의 사고력을 요구하는 문항으로 개선되었다고는 하나 여전히 학생이 어떤 사고 과정을 경험 하면서 학습하는지에 대한, 그리고 학습의 과정에서 학생이 보여 주는 장점과 단점은 무엇인지를 판 단하는데 유용한 정보를 얻는데 필요한 평가가 이루어지지 않고 있다는 점이 이를 입증하고 있다. 또 한 평가 결과는 학생들이 학습 과정에서 보여준 장점과 단점을 개선 내지 확충하는데 긍정적으로 피 드백되는 것이 아니라, 학생들을 등급화하는 자료로 주로 활용하고 있는 점도 이를 입증한다. 바람직 하지 못한 평가 활동은 평가가 교육의 과정과는 무관한 것으로 인식되고 학생들의 균형 있는 성장을 저해할 뿐 아니라, 학생들의 학습 습관 및 학습 방법을 바르게 개선하는데 부정적인 영향을 미친다. 따라서, 국어과의 학습 평가는 국어 교육의 본질을 추구하는데 가장 적합한 방식으로, 학생들의 사고 력 및 창의력 신장에 긍정적인 영향을 미칠 수 있게 개선해야 한다. 2. 국어과 서답형 5) 평가도구의 개발 절차 평가도구 6) 는 관련된 평가기준의 의미를 보다 명확하게 이해하는 것뿐만 아니라 학교 현장의 바람 직한 평가활동을 유도하는 데에도 도움을 줄 수 있을 것이다. 평가도구는 성취기준에 따른 교수 학습과 평가활동을 연계하는 역할을 수행한다. 여기서는 서답형 평가의 방법과 절차는 어떠한지 알아보고, 서답형 평가를 어떤 방향에서, 어떤 방식으로 구체화시켜 야 하는지에 대해 논의하려고 한다. 서답형 평가는 수업 방법을 개선하고 교수 학습과 평가를 유기적 으로 관련시키려는 목적을 지니고 있다. 이러한 점을 염두에 둘 때 수업 및 평가를 유기적으로 관련 지어 계획하고 그에 따라 실천하는 것이 필요할 것이다. 5) 서답형 문항은 선택형 문항과는 달리 답지가 제시되지 않고, 학생 스스로 자유롭게 답안을 쓰는 문항 형 식이다. 6) 흔히 평가도구라고 하면 좁게는 평가문항 혹은 시험지나 설문지 등 측정도구만을 의미하기도 하나 넓은 의미에서는 면접법이나 관찰법 등 측정방법이나 평가방법 그리고 더 나아가 평가의 시행 절차를 의미하기도 한다. 본 연구에서 언 급하고 있는 평가도구란 경우에 따라서는 특정 검사 혹은 측정도구를 의미하는 것으로 사용하기도 하고 경우에 따라 서는 평가방법이나 그 시행절차까지 포함하는 매우 포괄적인 의미로 사용한다. - 16 -
제1부 총 론 첫째, 연간(혹은 학기별) 수업 및 평가 계획서를 작성한다. 동 학년 교사들간의 상호 협의를 거쳐 학기별 혹은 연간 수업 및 평가 계획서 를 사전에 작성하는 작업이 필요하다. 수업 및 평가 계획 서 에는 적어도 교육 내용, 수업 방법, 평가 방법, 평가 시기 등을 포함하는 것이 바람직하다. 협의회나 면담을 통해 알아본 서답형 평가 계획 수립의 문제점으로 수업과 연계된 서답형 평가 계획을 수립 할 수 있는 시간의 부족과 시기의 부적절성이 제일 먼저 지적된다. 주로 교사들은 방학을 이용하여 교과 연구와 수업 및 평가 계획을 수립한다. 둘째, 성취 기준은 학습자가 국어 수업을 통해 도달해야 할 국어 능력의 내적 외적 특성 을 의미한다. 성취기준은 교수 학습 활동에서 구체적인 지침 역할을 하는 것으로, 무엇을, 얼 마나 가르쳐야 할 것인지를 말해주는 것이다. 2007 교육과정에서는 학년별 내용을 제시함에 있어서 제7차 교육과정과는 달리 성취 기준 이라는 용어를 직접적으로 사용하고 있다. 그리고 성취 기준의 용어를 다음과 같이 규정하고 있다. 성취 기준은 1 담화 또는 글의 수준과 범위+2 주요 내용 요소(지식, 기능, 맥락)+ 3 행동(분석, 해석, 평가, 조사 등)을 결합하여 진술 성취 기준은 개별적인 지식, 기능, 맥락보다는 한 편의 담화 또는 글을 수용하거나 생 산하는 활동에 맞추어 기술 성취 기준에 포함되는 지식, 기능, 맥락 관련 내용 요소는 해당 담화 또는 글을 생산, 수용하는 데 매우 중요하다고 생각되는 내용 요소로 함 셋째, 성취기준에 따라 다양화, 전문화, 특성화된 수업을 한다. 수업에서는 성취기준이 요구하는 활 동을 중심으로 수업하되, 교사의 일방전달식 강의가 아니라 학생들의 다양한 반응을 끌어낼 수 있는 수업을 진행해야 할 것이다. 그것을 위해서는 교육 내용에 따라 수업 방법을 다양화, 전문화, 특성화해야 한다. 넷째, 성취 정도를 파악하기 위한 평가 기준을 작성한다. 평가기준이란 교과 평가 활동에서 실질적인 기준 역할을 할 수 있도록 각 평가 영역에 대하여 학생들이 성취한 정도를 몇 개의 수준(예: 상, 중, 하)으 로 나누어, 각 수준에서 기대되는 성취 정도를 구체적으로 진술한 것 이다. 평가 기준은 평가 상황에서 학 생들의 성취 정도를 판별해 주는 역할도 하지만, 학생들에게 자신이 어느 부분을 더 노력해야 하며, 어느 부분을 잘 하고 있는지에 대한 정보를 제공할 수 있다는 장점도 있다. 또 교사에게는 자신의 교수법을 반성 하고 앞으로의 교수 학습 방법을 계획하는 데에 중요하게 활용할 수 있는 자료로서의 역할도 할 것이다. 다섯째, 평가기준에 비추어 성취 정도를 평가하기 위해서는 그것에 적절한 평가 도구를 제작해야 한다. 해당 대단원을 배우기 전에 미리 학생들에게 어떤 유형의 평가도구를 활용하여 평가할 것이라는 것을 미리 알려주는 것도 좋다. 문항을 작성할 때에는 그에 적절한 평가 과제를 선정하여 문항을 작성하고 그에 따른 모 범답안이나 채점 기준도 작성해야 한다. 서답형 평가 도구를 개발할 경우에는 가능한 한 학생이 자신의 생각 이나 의견을 드러낼 수 있도록 해야 하며, 평가를 시행하기 전에 채점 기준과 모범답안을 작성하는 것이 평가 의 객관성을 유지할 수 있다. 이것은 교사의 임의적인 판단에 따른 평가가 되지 않도록 하기 위해서이다. 여섯째, 제작한 평가 도구를 활용하여 다양화, 전문화, 특성화된 평가를 실시한다. 다양화, 전문화, 특성 화된 평가의 실시를 위해서 중요한 것이 바로 평가 장면의 다양화 이다. 평가 문항의 성격에 따라 다양한 평가 상황을 연출하는 것이 필요하다는 것이다. 가령, 문학 작품이나 여러 읽기 자료를 앞에 놓고, 서술형이 나 논술형 문항에 답하거나 혹은 토론하게 할 수 있고, 말하기, 듣기, 읽기 등의 경우, 특정 주제나 제재를 미리 알려주고 그것에 관한 여러 자료를 준비하게 한 다음, 평가 문항에 답하게 하는 장면을 구성할 수도 있다. 어떤 글이나 문학 작품 목록을 미리 공고하여 읽어오게 하는 방법도 있다. 평가 장면을 다양화함으로 써 학생들로 하여금 좀더 깊은 사고력과 창의적인 반응을 유도할 수 있는 조건을 조성할 수 있을 것이다. 일곱째, 평가 결과를 교수 학습활동에 송환한다. 특히, 수업 및 평가 계획서의 작성에서부터 평가 결 과의 보고에 이르기까지 전 과정의 내용이나 방법들을 수정, 보완, 개선을 하기 위한 자료로서의 역할을 할 수 있도록 해야 할 것이다. - 17 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 3. 국어과 평가의 실제 가. 출제자의 조건 평가 문항을 개발하고자 할 때, 문항 개발자는 평가하고자 하는 교과 내용을 충분히 이해하고 있 어야 한다. 즉 해당 교과의 교육과정, 교과서, 교사용 지도서의 내용을 섭렵하고, 정확하게 이해하여 야 한다. 교과의 교육목표와 각 교육 내용, 그리고 교수 및 학습 원리 등이 무엇이며, 어떻게 체계적으로 연계되어 있는지, 그리고 교과서는 이를 어떻게 반영하고 있는지 등을 분석해 본다. 교과 내용(사실이나 원리, 개념 등)이 학교급 간, 학년 간, 교과 내 단원 간 혹은 교과 간에 어 떤 체계를 이루고 있는지, 어떤 관련성을 가지고 있는지 등을 분석해 본다. 훌륭한 문항 개발자가 되기 위해서는 개인적인 능력과 함께 풍부한 문항 개발 및 검토 경험과 성 실한 노력이 더욱 중요하다. 문항 제작자의 조건을 고루 구비하였다고 해도, 좋은 문항을 제작하기 위해서는 실제로 문항을 제작하고 검토해 보는 경험을 풍부히 쌓아야 한다. 개인적인 차원에서 부단히 문항을 제작하고 검토하는 연습을 해 본다. 문항을 제작하고 검토하는 시간을 정기적으로 할애하고 이를 실천해 본다. 동료 교사와 정기적인 문항 제작 및 검토 협의회를 구성 운영해 본다. 지역이나 국가 차원의 출제 업무에 능동적으로 참여해 본다. 자신이 제작 시행한 시험의 결과를 분석 평가하여 이를 체계적으로 정리해 본다. 타인의 조언이나 의견에 귀 기울이는 자세를 견지하고자 노력한다. 나. 좋은 문항의 조건 "좋은 문항이란 이런 것이다."라고 말할 수 있는 절대적인 판단 기준을 설정하기란 매우 어렵지만 다음과 같은 조건을 충족시키고자 노력한다면 좋은 문항을 제작할 수 있다. 첫째, 문항 내용과 평가 목표(성취기준)가 일치하여야 한다. 이는 좋은 문항이 되기 위한 가장 일 차적인 조건이면서, 문항과 검사의 타당성을 높이기 위한 필수 조건이다. 만약 어떤 문항이 사회 현 상에 대한 비판적 분석 능력을 측정한다고 하고서, 실제적으로는 학생들의 언어 능력 특히 독해력에 의해 정답 여부가 결정되거나 혹은 특정 어휘의 이해 여부에 의해 맞고 틀리는 것이 결정된다면 이 는 엉뚱한 것을 측정하는 문항이 되고 만다. 따라서 문항 제작자는 문항이 측정하고자 했던 교육 목 표와 내용이 구체적인 행동과 내용으로 문항에 드러날 수 있도록 문항 장면을 설정해야 한다. 둘째, 단순 지식의 기억 및 재생을 묻기보다는 사고력, 특히 분석, 종합, 평가 등의 고등 정신 능 력을 물을 수 있는 문항이어야 한다. 물론, 평가 목적이 단순 기억에 의한 사실 재생에 있다면 복합 성이란 조건이 중요하지 않을 수도 있다. 하지만, 대부분의 교육 목표가 단순 사실 암기에 있지 않음 을 상기하고, 가급적 사고력을 묻는 문항을 제작하도록 노력해야 할 것이다. 셋째, 문항의 형식 혹은 내용이 현재까지 많이 사용되어 왔던 진부성을 벗어나 학생에게 새로운 경험을 주는 것이어야 한다. 하지만, 참신성을 너무 강조하여 중요하지 않은 내용을 묻거나 지나치게 생소한 문항을 제작하는 우를 범하지 않아야 한다. 넷째, 구조화란 문항의 체계성과 명료성을 의미하는 것으로, 이를 위해 문항 제작자는 학생들이 답해야 할 방향을 명확하게 구체화해야 한다. 예컨대 '서답형 평가에 대해 논하라'는 문항보다는 '서 - 18 -
제1부 총 론 답형 평가의 정의와 특성을 설명하고, 서답형 평가 시행상의 문제점과 개선 방안을 제시하라'는 문항 이 더 구조화되었다고 볼 수 있다. 단, 서답형 특히 논술형의 경우에는 지나치게 구조화되어 표현력 이나 창의력 등을 측정하기 어렵거나 혹은 전혀 구조화되지 않아 불명료한 문항이 제작되어서는 안 된다. 다섯째, 평가도 하나의 교육 활동으로서, 학생들의 사고력을 배양하고 학습에 대한 흥미와 도전감 을 북돋우도록 제작 활용될 필요가 있다. 충실하게 학습한 학생이면 무난히 풀 수 있도록 문항을 제 작함으로써 학생들에게 긍정적 자아개념을 형성하게 하는 일, 주변의 일상 생활과 밀접히 관련지어 문항을 구성함으로써 해당 교육 내용에 대한 흥미를 유발하는 일, 참신하면서도 약간 어려운 문항을 출제함으로써 호기심과 도전감을 불러일으키는 일 등은 교육적으로 중요하다. 여섯째, 평가의 목적과 학생의 수준에 적합하고, 문항 제작 원리 혹은 유의점에 충실하며, 윤리적 교육적으로 바람직하고, 특정 집단에 유리하거나 불리하지 않고 공정해야 하는 등의 요건을 충족시 켜야 한다. *참고로 미국 오래곤 주의 평가 문항은 교사와 전문가로 구성된 협의회에서 개발된다. 과제는 매우 정 교하게 개발되고 있으며 다양한 개발 지침이 있다. 평가 문항 개발 지침의 일부를 소개하면 다음과 같다. 1 과제와 채점 기준이 연결되어야 한다. 2 학생이 과제를 해결하기 전에 알아야 할 내용, 과정, 전략을 요구해야 한다. 3 교육과정의 내용, 개념, 이슈, 문제가 과제와 수행 결과에 연결되어야 한다. 4 보편적인 용어 맥락, 배경 지식을 제공해야 한다. 5 과제는 모든 학생에게 학습의 기회를 제공해야 한다. 6 과제는 흥미 있고 학생을 참여시켜야 한다. 7 과제는 개인화 시킬 수 있어야 한다. 즉, 학생이 해석하고 판단을 적용하기를 요구해야 한다. 8 과제는 생의 경험을 전이시킬 수 있어야 한다. 그리고 문항 개발자에게 다음과 같은 초인지적 체크리스트가 제공된다. 1 이 과제가 나의 교수-학습 프로그램에 어떻게 연결되는 것인가? 2 이 과제가 학업 인증(CIM)과 어떻게 잘 연결되는가? 3 과제의 주요 주제나 교육과정의 의도는 학생에게 명확한가? 4 이 과제는 평가되는 내용에 다양성을 더하고 있는가? 다. 문항 유형과 특성 1) 서술형 문항 서술형 문항이란 주어진 주제나 요구에 대해 자유로운 형식으로 서술하는 문항을 의미한다. 국어 과에서 사용할 수 있는 서술형 평가는 문항 출제자가 제시한 문제에 대해 학생이 반응하는 대신, 학생이 문제 해결 과정이나 개념을 제대로 이해하고 있는가를 알아보기 위하여 행해지는 지필 평가 방법 중의 하나로 학생이 답지를 직접 구성하는 검사 형태이다. 완성형이나 단답형도 넓은 의미의 서술형으로서 학생 반응의 진위를 판단할 수는 있으나 학생의 생각이나 사고 과정을 알기 어렵다는 점에서 서술형으로 보기 어렵다. 그러므로 서술형은 단답형이나 완성형을 제외한 주관식 서술형을 의미한다. - 19 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 2) 논술형 문항 논술은 주어진 과제를 논리적 과정을 통해 해결하고 그 결과를 언어로 서술하는 글쓰기로서, 사물 을 객관적으로 관찰하고 합리적으로 판단하며 논리적으로 사고하는 사람을 기르기 위한 교육 영역이 다. 논술을 성공적으로 수행하기 위해서는 우선 문제를 발견하는 능력이 있어야 하고, 발견한 문제를 해결하는 과정이 적절하게 이루어져야 하는데, 이 과정 전체는 논리적 사고가 뒷받침되어야 한다. 또 한 종합적으로 문제를 검토할 줄 아는 능력이 있어야 한다. 문제를 마련하고 검토한 다음에는 언어 형식으로 표현하는 글쓰기의 과정을 거쳐야 한다. 논술형 문항의 경우, 학생들이 논해야 할 주제가 무엇인지 분명히 드러나도록 해야 한다. 논술형 문항도 일종의 서술형 문항이기는 하지만, 개인 나름 의 생각이나 주장을 창의적이고 논리적이면서도 설득력 있게 하나의 완결된 구조로 조직해야 한다는 것을 강조한다는 점에서 일반 서술형과 구별할 수 있다. 따라서 논술형 문항에서는 내용의 깊이와 폭뿐만 아니라 글을 조직하고 구성하는 능력, 다시 말하면 해결해야 할 문제 상황에 대한 논변력을 강조한다. 자신이 주장하는 내용에 대해 타당한 논거를 제시하고 있는지, 그리고 그 논거가 상식적이 거나 식상한 것이 아니라 자신의 독창적인 사고를 잘 드러내는 것인지, 자신과 다른 견해를 적절하 게 비판하는지에 초점을 맞추어 평가해야 한다. 논술형의 장점은 다른 문항형식에서는 측정하기 어려운 사고력, 추리력, 종합력, 비판력, 분석력, 응용력, 표현력, 창의력과 같은 정신기능을 비교적 쉽게 측정할 수 있다는 데 있다. 이러한 장점을 최대한 살릴 수 있도록 문항을 제작해야 하며, 다른 형식에서 측정할 수 있는 정신기능은 구태여 논 술형을 사용하여 측정할 필요가 없다. 논술형 문항의 공통적인 약점이 너무 모호하고 일반적이라는 점이다. 논술형을 잘못 만들면 구체적인 목적에 예리하게 부합되지 않는 문항이 되기 쉽다. 그러므로 문항이 요구하는 영역을 규정하고, 제한하며, 이것을 잘 구조화시킬 필요가 있다. 4. 국어과 서답형 평가도구 제작 시 유의점 가. 과제의 구체적 제시 언어활동은 진공의 상태에서 이루어지지 않는다. 항상 언어활동이 이루어지는 구체적인 상황이 있게 마련이며, 왜 무슨 목적으로 그러한 언어활동을 해야 하는지를 염두에 두고 문항을 개발해야 한다. 다시 말하면 학생이 수행해야 할 과제를 구체적으로 명시해야 한다는 의미이다. 예를 들어 요약하기 활동을 한다면, 무엇을 위해 요약하는지를 명확하게 밝혀줄 필요가 있다. 이야기를 읽고 친구에게 들려주기 위해 요약을 하는 것인지, 아니면 내용 정리를 위해 요약하는 것인지 등에 대한 정보를 상세하게 알려주어야 한다. 그 이유는 학습자로 하여금 그 활동을 어떤 상황에서, 왜 하는 것인지 알려줌으로써 활동을 좀 더 구체화하는 데 도움을 주기 위한 것이다. 요약하기 활동이 단선 적인 듯하지만, 어떤 상황에서 어떤 목적을 위해 활동을 하느냐에 따라 활동의 내용이 달라질 수 있다. 한편, 수행 평가는 실제적인 언어 상황을 강조하지만, 현실적으로 평가가 교수 학습 상황에서 이루어지기 어렵기 때문에, 그와 유사한 언어 상황을 제시하는 것이 필요하다. 나. 평가 장면의 구체화 이것은 앞에서 말한 과제의 구체적인 명시 와 직접적으로 관련이 있는 항목이다. 주어진 수행 과 제를 어떤 장면에서 평가해야 하는지에 대한 상세한 정보를 제시해야 한다. 이 정보는 학생과 교사 모두에게 필요한 정보이다. 막연한 활동을 제시하는 것은 학생들의 구체적으로 어떤 활동을 해야 하는지에 대해 별다른 도움을 주지 못한다. 말로 하는 것인지, 글로 쓰는 것인지, 보고서 형식으로 - 20 -
제1부 총 론 써야 하는 것인지 등을 명확하게 제시해야 한다. 따라서 문항에서 언어활동의 조건을 구체화해야 한다. 예를 들어 말하기 듣기 활동 에서는 말하는 시간, 청자의 유형, 청자의 인원수 등을, 쓰는 활 동에서는 글의 종류, 쓰는 시간, 글의 길이 등을 명시하는 것이 필요하다. 조별 활동을 할 경우 조 별 적정 인원수를 명시하는 것이 좋으며, 필요하다면 조별 구성원의 활동 유형을 명시하는 것도 좋 다. 또 이 과제를 어느 대단원의 어느 차시에 해야 하는지에 대한 정보를 주는 것도 필요하다. 다. 학년 수준에서 해결할 수 있는 수행 과제 제시 문항 내용이나 지시문 등의 어휘 수준이 학생의 수준에 적합해야 한다. 문항의 내용이나 지시문 내용이 너무 난해한 수준으로 표기될 때 학생들이 질문의 요지를 파악할 수 없어 의견을 서술할 기 회를 상실하고 만다. 지문이나 지시문의 내용이 학생에게 어려우면 측정 내용에 대한 인지 능력과 독해력이 포함되어 학생의 능력 추정이 부정확해질 수 있다. 활동의 유형이나 수준의 측면에서, 중학 교 학생들이 실질적으로 할 수 있는 활동이어야 한다. 중학생 수준에 맞지 않거나 하기 어려운 활 동을 제시해서는 안 된다. 예를 들어, 아버지의 입장에서 설득하는 말을 하라 보다는 아버지를 설 득하라 가 좀더 적절하며, 지하철 안내 방송 담당자가 되어 손님들에게 편지를 쓰시오 보다는 지하 철 안내 방송 담당자에게 편지를 쓰시오 식으로 구성하는 것이 적절하다. 평가 도구에서 인용하는 언어 자료 역시 중학교 학생 수준에 맞는 것을 제시해야 한다. 지나치게 전문적인 지식을 필요로 하는 자료와 실용성이 검증되지 않은 특수한 지식을 다룬 자료는 제시하지 말아야 한다. 지나치게 시사적인 내용보다는 교육적으로 유의미한 내용을 담은 언어 자료를 선택하는 것이 좋다. 또한 학생 이 충분히 답할 수 있는 시간을 고려하여(특히 느린 학생을 고려하여) 배당 시간을 제시할 때, 학생 이 시간을 적절히 안배할 수 있다. 특히 객관식과 주관식을 혼용하여 검사를 제작할 때 주관식 문항 의 배당 시간을 충분히 제공함으로써 학생의 시험 불안 및 혼란을 경감시켜야 한다. 라. 채점 기준의 상세화 방안 채점 기준의 작성은 서술형 평가의 핵심적인 부분이다. 서술형 평가가 지니는 의미와 그 장점에 대해서는 대부분 인정하면서도 그것의 현실적인 적용을 우려하는 이유 중 대표적인 것이 바로 채점 의 공정성 문제이다. 아무리 문항이 좋더라도 채점 기준이 적절하지 않으면 공정한 평가가 이루어 질 수 없으며, 그것은 평가 문항으로 적절하지 않다는 것이다. 채점 기준을 상세화해야 하는 또 하 나의 이유는, 앞에서도 언급했듯이, 하나의 정답이 아니라 가능성 있는 여러 종류의 답을 고려해야 하는 평가의 경우, 채점의 경계선상에서 그 답안을 어떻게 해석하느냐에 따라 다른 채점이 가능할 수도 있다는 부담 때문이다. 그러한 해석의 유동성을 방지하기 위하여 채점 기준을 상세화할 필요 가 있다. 채점 기준은 가능한 한 상세화하되, 가능성 있는 여러 종류의 답을 모두 포괄할 수 있게 해야 한다. 1) 채점 기준은 3점 척도(또는 5점 척도)를 중심으로 하여 작성한다. 채점 기준은 평가하고자 하는 목표의 성취 정도를 질적으로 차별화하여 제시한 것이어야 한다. 그리고 채점 기준의 수준 구 분은 이론적 경험적으로 타당한 근거에 기초하여 이루어져야 한다. 채점 기준을 평가자 임의대로 설 정해서는 안 된다. 채점 기준이 얼마나 이론적, 경험적으로 타당한 근거에 기초하여 이루어졌느냐의 여부가, 바로 우리가 제대로 된 평가를 실시했느냐를 결정하는 핵심적인 요소라고 할 수 있다. 채점 기준을 작성할 때는 일반적으로 상, 중, 하 3점 척도를 많이 활용한다. 따라서 본 연구에서도 활 용의 편의를 주로 상/중/하 3점 척도를 중심으로 하여 논의하고자 한다. 그러나 평가의 상황과 목 적에 따라 5점 척도를 활용하는 것이 필요할 경우, 얼마든지 재조정하여 활용할 수도 있다. - 21 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 2) 상/중/하 의 구분은 원칙적으로 양적인 구분이 아니라 질적으로 구분한다. 있다/없다 혹은 했다/못했다 와 같은 구분이 아니라 평가 목표를 성취했다면 보이게 될 반응을 연속선상에서 바라 보고, 높다/중간이다/낮다 혹은 아주 잘 했다/잘 했다/잘 못했다 와 같이 구분할 수 있어야 한다. 이를 전제로 다음과 같은 상/중/하 진술 방식을 제안하고자 한다. 상 : 설득력있게, 적절하게, 효과적으로, 매우 등의 부사어를 활용할 수 있다. 중 : 대체로 평가 목표의 기본적인 성취로 보아, 한다 라고 진술하는 것이 필요. 가끔 하지 못하는 때가 있다 라는 진술도 필요에 따라 활용 가능. 하 : 무조건 하지 못한다 라는 진술을 지양하고 다소 미흡하다, 부족하다 등의 진술 필요. 3) 채점 요소는 영역 통합의 수만큼 제시한다. 가) 단원별 수행 평가 도구 : 하나의 채점 요소에 의한 기준 제시 나) 단원 통합형(영역 통합일 경우) 수행 평가 도구 : 통합한 영역의 수만큼의 채점 요소를 제시 해야 한다. 그러므로 영역 통합 문항의 경우, 영역의 수에 맞게 채점 기준을 작성해야 한다. 예를 들어, 문학 영역과 쓰기 영역을 통합한 문항일 경우, 문학 영역의 평가 목표를 평가할 수 있는 채점 기준과 쓰기 영역의 평가 목표를 평가할 수 있는 채점 기준을 작성해야 한다. 4) 채점 기준 작성 과정에서 생기는 오류를 수정할 때 다음을 참조할 수 있다. 가) 상, 중, 하 의 기준을 설정할 때 가장 중요한 원칙은 포괄성(망라성)과 배타성이다. 즉, 상, 중, 하의 수준이 의미하는 능력의 진술이 평가(측정)하고자 하는 평가 목표(혹은 능력)의 범위를 총 망라해야 함과 동시에, 수준 간에 겹치는 부분이 있어서는 안 된다. 현재 개발된 도구의 채점 기준표에는 평가하고자 하는 요소에 대한 포괄성을 유지하지 못하는 경우와 상, 중, 하 간 상호 배타성을 유지하지 못하는 경우가 종종 있다. 예1) 중: 부족하게 기술하였다 하: 부적절하게 기술하였다. 예2) 중: 상대방의 의견을 경청하며, 토의 주제와 목적은 파악했으나, 실현 가능한 해결 방 안 제시가 미흡한 편이다. 하: 상대방의 의견을 경청하나, 토의 주제와 목적 파악 및 실현 가능한 해결 방안 제시 도 부족하다. 토의 주제와 목적은 파악했으나, 상대방의 의견을 경청하지 않고 실현 가능한 해결 방안 제시도 부족하다. 어느 등급인가요? 예3) 상: 글 전체의 내용과 관련된 질문을 3~5가지를 만들었다. 중: 글 전체의 내용과 관련된 질문을 3~5가지를 만들었으나, 부적절한 질문이 끼어 있다. 하: 글 전체의 내용과 관련된 질문을 2개 이하를 만들었거나 부적절한 질문이 2개 이 상 끼어 있다. 관련 질문을 5가지 만들었으나, 2개가 부적절한 것이었다. 어느 등급인가요? (수정 안) 상: ---관련하여 적절한 질문을 4가지 이상(혹은 4~5가지) 만들었다. (질문이 4~5개이다.) 중: ---관련하여 적절한 질문을 2~3가지 만들었다. (질문이 2~3개이다.) 하: ---관련하여 적절한 질문이 1개 이하이다. - 22 -
제1부 총 론 나) 상, 중, 하의 능력 구분(진술) 방식은 다음과 같다. 채점 요소를 측정하는 데 필요한 준거가 모두 동일한 비중을 가지거나 그 요소를 구성하는 데 분리하기 어려운 경우 상: 3가지 준거를 충족시키는 경우 중: 2가지 준거를 충족시키는 경우 하: 1가지 이하의 준거를 충족시키는 경우 채점 요소를 측정하는 데 필요한 준거 중 가장 핵심적인(중요한) 준거를 우선시 하는 경우 <제1방식> : 3가지일 경우 상: 핵심 준거 + 나머지 모두 성공적으로 수행 중: 핵심 준거 + 나머지 중 하나 만 성공적으로 수행 하: 핵심 준거 + 나머지 모두 불수행 혹은 핵심 준거를 수행하지 못한 경우 <제2방식> : 2가지일 경우 상: 핵심 준거 + 나머지(우수) 수행 중: 핵심 준거 + 나머지(보통) 수행 하: 핵심 준거를 수행하지 못한 경우, 핵심 준거를 수행하였으나 나머지를 수행하지 못한 경우 상: 핵심 준거 + 나머지(우수) 수행 중: 핵심 준거 수행, 나머지 수행 못함 하: 핵심 준거를 수행하지 못한 경우 다) 채점 기준의 타당성 있게 제시되어야 한다. 평가 목표와 채점 기준이 맞지 않는 경우 예) 평가 목표: 글의 제목을 추론할 수 있다. 채점 기준: 모둠 자체평가에서 가장 좋은 평가를 받은 학생 1-2명(상), 중간 평가 3-4명(중), 낮은 평가 1-2명(하) 모둠별 자체 평가서는 참여도, 경청 자세, 타인의 의견 존중과 같은 듣기 태도가 대부분 이고 일부 참신한 의견 제시가 평가 요소로 포함되어 있는데, 이는 평가 목표와 타당하 게 일치하지 않는 것임. 따라서 자체평가서를 통해 좋은 평가를 받은 학생이 글의 제목을 추론할 수 있는 능력을 갖추었다고 일반화하기가 매우 어려움. 제시된 채점 기준표는 듣기 태도 평가에 국한하여 활용할 수 있음(별도의 채점 기준표임). 채점 기준의 비일관성 예) 상, 중, 하 등급 중 하 에만 어법의 수준을 적용한 경우가 있는데(어법에 어긋나는 것 이 20% 이상인 경우 하 ), 측정하고자 하는 평가 목표와 일치하는 능력인지를 먼저 고려하고(직접적으로 연계되지 않는다면 채점 준거에서 제외시켜야 함) 연계되는 것이라면, 하 뿐만 아니라 상, 중 을 구분하는 어법 수준을 제시해 주어야 할 것임. 단, 채점 요소에 뭉뚱그릴 것이 아니라, 평가 목표를 재는 채점 요소 중 별도의 채 점 요소 항목으로 설정해야 할 것임. - 23 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 마. 모범 답안 제시 출제자는 문항 제작과 함께 모범 답안을 제작하여야 한다. 모범 답안을 통하여 검사 문항의 오류 가능성을 배제할 수 있을 뿐만 아니라 문항에 포함시킬 채점 기준을 명료히 할 수 있다. 즉 그 문항 이 어떤 자료를 동원해야 하는지, 어떤 조직이 타당한지, 또 결론이 어떻게 되어야 하는지에 대한 채 점 기준의 방향을 시사 받을 수 있다. 모법 답안의 예는 출제자가 학생들의 반응을 점검하면서 추가 할 수 있다. 바. 서답형 문항의 검토 문항이 개발되면 다음 사항을 점검하며 문항을 수정한다. 성취기준을 제대로 반영한 문항인지 검토한다. 평가기준의 상/중/하 중 취하고자 하는 것을 제대로 반영하였는지 검토한다. 문항이 제대로 구조화되어 있는지 검토한다. 다시 말하면 성취기준과 학생들의 활동을 연결시킬 수 있는 문항인지 검토한다. 학생들의 유의미한 반응을 이끌어 낼 수 있는 문항인지 검토한다. 모범 답안의 범위가 적절한지 검토한다. 채점 기준이 학생들의 반응을 제대로 구조화한 것인지 검토한다. 교수 학습 활동을 통해 적절하게 활용할 수 있는 문항인지 검토한다 < 예시 문항 > 성취기준 문맥을 활용하여 생략된 내용을 추론하며 글을 읽을 수 있다. 평가기준 상: 글을 읽고, 문맥을 활용하여 생략된 내용을 추론하고, 그 타당성을 증명할 수 있다. 중: 글을 읽고, 문맥을 활용하여 생략된 내용을 추론할 수 있다 하: 글을 읽고, 문맥을 활용하여 생략된 내용을 추론하는 데 다소 미흡하다 황희 정승이 (라)의 밑줄 친 부분과 같이 말한 이유를 본문에 나와 있는 낱말을 활용하여 글자 수 20자 내외로 쓰시오. [6점] (가) 당신의 몸 중에서 가장 높은 부분이 어디요? 하고 누가 묻는다면, 우리는 머리 꼭대기라고 대답할 것이다. 그러나 하루의 3분의 1을 잠자는 데 써 버리는 우리들이니, 누워 있는 사람에게 그 상태에서 가장 높은 부분이 어디냐고 물어 본다면, 아마 대답은 코나 배꼽이라고 할 것이다. 이것은 생각하는 기준에 따라 판단( 判 斷 )의 결과( 結 果 )가 어떻게 달라지는지를 보여 주는 예( 例 )이다. (나) 기준을 어디에 두느냐에 따라 틀린 답이 맞고, 맞은 답이 틀릴 수도 있다. 그러므로 우리도 판단할 때에 그 기준이 무엇인지를 생각해야 하며, 다른 기준에서는 어떠한지도 고려해 보아야 한다. (다) 누구나 모두 똑같이 생각하고 똑같이 행동( 行 動 )해야 하는 사회는 발전 가능성( 可 能 性 )이 아 주 적다. 모든 사람들이 획일적으로 생각하도록 하고 행동하도록 규제하는 사회는 희망이 없다. (라) 세종( 世 宗 ) 때, 황희 정승이, 서로 자기가 옳다고 우기며 찾아와 판가름해 달라는 사람들에 게 네가 옳다., 그리고 너도 옳다. 라고 했다는 고사( 故 事 )는, 융통성이 없이 한 가지 생각만 옳다 고 주장하는 흑백 논리를 벗어나게 하는 지혜의 좋은 본보기라고 할 수 있다. (마) 나 만이 옳다는 생각, 나 만이 바르게 산다는 생각, 나 의 판단만이 제일이라는 주장을 다시 한 번 남의 기준으로 평가( 評 價 )해 보고, 다른 사람의 처지를 생각할 수 있는 아량 있는 친구, 너그 러운 이웃이 있는 여유 있는 사회를 그려본다. - 24 -
제1부 총 론 <모범 답안> 1 생각하는 기준에 따라 판단의 결과가 달라질 수 있으므로 2 기준을 어디에 두느냐에 따라 틀린 답이 맞고, 맞는 답이 틀릴 수도 있으므로 3 서로 옳다고 생각하는(우기는) 기준이 다를 수 있으므로 4 서로의 처지가 다를 수 있으므로 5 남의 기준(처지)에서 생각하면 결과가 다를 수 있으므로 <채점 기준> 6점: 모범 답안 1~5 중 하나를 쓴 경우 기준, 처지 라는 핵심어를 활용하여 황희 정승의 의도에 맞게 답한 경우 4점: 본문에 나와 있는 낱말을 활용하면서, 황희 정승의 의도에 포괄적으로 근접하는 답을 한 경우. 황희 정승의 의도보다는 글쓴이의 의도에 가까운 답을 한 경우. 예) 흑백 논리를 벗어나게 하는 지혜를 가르치기 위해 흑백논리에서 벗어나기 위해 획일적으로 생각하고 행동하도록 규제하는 사회는 발전 가능성이 적으므로 너그러운 이웃이 있는 여유 있는 사회를 위해 2점: 본문에 있는 낱말을 활용하지는 않았지만 황희 정승의 의도를 추상적인 수준에서 답한 경우 예) 양쪽 다 옳으므로 어느 쪽을 편들기 어려우므로 글자 수의 미달 혹은 초과에 대해서는 점수에 반영하지 않음. - 25 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 3 사회과 서술형 평가도구 개발 방향과 절차 인하대학교 사회교육과 박선미 1. 서술형 평가도구의 특징 서술형 평가도구(short-answer form)도 선다형 평가도구와 유사하게 사회과 평가영역 중 지식의 이해 정도를 측정하는 데 적합하다. 서술형 평가도구는 간단한 구나 절 등으로 응답하 는 문항 형태로 용어의 정의나 의미를 질문할 때 자주 사용되고, 짧은 답을 요구하는 문항 유 형의 특성상 지식 개념 사실 등을 알고 있는지를 측정하는 데 적합하다. 서술형의 경우 답 의 길이는 약 10-100자 정도로 한다. 문항에서 요구하는 답안의 길이를 중심으로 볼 때, 비 교적 짧은 분량의 문항(약 10-50자), 비교적 긴 분량의 문항(51-100자)으로 나눌 수 있다. 평가문항의 성격에 따라 필요할 경우, 목적 분량 시간 등을 제한하여 명시할 수 있다. 서술형 평가도구 개발은 선다형 평가도구 개발보다 상대적으로 용이하고, 피험자가 추측에 의해 정답을 맞힐 확률이 낮다. 그리고 논술형 평가도구에 비하여 채점이 객관적으로 이루어질 수 있고, 문장력에 의해 점수가 부여되는 효과를 배제할 수 있다는 장점이 있다. 그러나 서술 형 평가는 선택형 문항에 비하여 채점의 객관성을 보장받기 어려우며, 특히 정답에 대한 서술 내용의 다양성으로 정답 논란이 야기되기 쉽다. 서술형 평가에서 묻고자 하는 것이 너무 포괄적 일 경우, 학생들의 답안 반응이 다양하게 나올 수 있기 때문에 채점의 공정성 문제가 야기되기 쉽다. 그래서 서술형 평가도구를 개발할 때 가장 힘든 점은 정답이 하나가 되도록 지시문을 개 발하기 어렵다는 점과 학생들의 답안에 대한 정 오답 판단이 쉽지 않다는 점이다. 2. 서술형 평가도구 개발 절차 가. 사회과 연간(혹은 학기별) 수업 및 평가 계획서 작성 사회과 교사들은 상호 협의를 거쳐 학기별 혹은 연간 수업 및 평가 계획서 를 사전에 작성 한다. 연간수업 및 평가계획을 수립하기 전에 각 단원별 교수 학습목표를 구체화하고, 단원별 목표를 달성하기 위한 수업방식과 교수 학습 자료를 결정하는 것이 좋다. 수업 및 평가계획은 대체로 각 주별 계획으로까지 상세하게 작성할 필요가 있다. 수업 및 평가계획서 작성의 일반 적 절차는 다음과 같다. 첫째, 사회과 교육과정에서 제시된 단원별 교육 목표 및 내용을 해석한다. 수업과 평가는 결국 교사 수준에서 운영되는 것으로, 교사는 각 단원의 목표와 내용을 재해석하여 수업 및 평 가 방향을 설정한다. 둘째, 각 단원을 몇 차시에 걸쳐 수업할지 결정하고, 각 차시별 수업 내용과 방법을 결정한다. 셋째, 각 단원의 내용에 따른 평가 시기와 방법을 결정한다. 그리고 총괄평가에서 선다형 평가로 물을 내용과 서술형 평가로 물을 내용을 구분한다. 넷째, 각 평가문항에 따른 배점을 결정한다. - 26 -
제1부 총 론 나. 서술형 평가 도구 개발 및 검토 서술형 평가도구를 제작하기 위한 사전 단계로, 단원의 교육목표에 비추어 내용 요소를 어 느 정도의 범위와 깊이까지 학습하였는지, 또 어떠한 기능과 자질을 갖추어야 하는지를 명료 화할 필요가 있다. 즉 자신이 가르친 성취기준과 내용을 다시 검토하여 교육목표의 성취 정도 를 측정하기 위한 문항 질문, 자료 등을 준비하고 문항을 구조화한다. 그리고 채점기준과 예 시답안을 작성하면서 다시 서술형 문항을 수정 보완한다. 서술형 평가도구가 1차 완성되면, 검토와 수정 과정을 거쳐 완성된다. 검토는 내용 점검과 형식 점검으로 구분된다. 내용 검토는 주로 평가도구와 성취기준과의 부합성 난이도 자 료의 적절성, 지시문의 명료성, 예시 정답의 정확성 채점기준의 적절성 등을 고려하고 검 토한다. 그리고 형식 검토는 질문의 명료화 문법적 구조 자료의 편집 부합성 등을 기준으 로 검토한다. 다. 채점기준에 따른 채점 채점기준과 채점방법을 정확하게 이해한 후 채점하고 평가의 목적에 부합하도록 성적을 부 여한다. 채점기준은 문항에서 질문하고 있는 내용을 기준으로 설정해야 한다. 필히 사전에 작 성한 채점기준에 따라 5% 정도 학생 답안을 대상으로 가채점한 후 채점기준을 수정보완한 후 전체 채점에 들어가야 한다. 가능하면 2명 이상이 채점에 참여하여 채점의 오차를 줄이는 것도 바람직할 것이다. 교사 간에 생각하는 점수의 차가 너무 클 경우, 합의하여 점수를 조정 함으로써 채점의 신뢰도를 높이도록 한다. 라. 평가 결과의 분석과 해석 교사는 평가 결과를 정확하고 타당하게 분석 및 해석할 수 있어야 한다. 묻고자 하는 내용 에 대하여 학생들이 어느 수준에서 이해하고 있는지, 자신이 가르친 내용을 몇 %의 학생들이 이해했는지를 분석하여 학생의 성취 정도를 판단할 수 있어야 한다. 평가 결과를 토대로 자신 의 교수 내용과 방법의 강 약점을 설명하고 개선 방향을 제시해야 한다. 3. 서술형 평가 문항 작성의 원리 가. 교육목표의 성취수준을 파악하도록 한다. 평가의 중요한 기능은 학생들의 능력을 정확히 파악하고 이를 기반으로 교수 학습을 개선하 는 데 필요한 정보를 추출 제공하는 것이다. 교육목표가 여러 사회현상에 대한 분석 결과로부 터 일반화를 추론하는 능력을 요구하는 것이라면 그러한 능력을 측정할 수 있도록 문항을 개 발해야 한다. 그래서 서술형 평가 문항을 개발하는 데 가장 먼저 고려할 점은 교육목표에의 도달 정도를 측정하는 데 적합한 질문을 개발하는 것이다. 즉 문항에서 측정하고자 하는 능력 이 원래 학습 목표로 했던 능력과 일치하여야 한다. - 27 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 나. 지시문을 간결하고 분명하게 해야 한다. 출제자의 출제의도가 피험자에게 정확히 전달되도록 지시문이 분명해야 한다. 질문이 추상 적이고 포괄적이어서 해석의 여지가 많다면 채점이 가능하지 않기 때문에 평가 문항으로 적 절하지 않다. 문항은 피험자가 답해야 할 방향을 명확하게 구체화하여야 한다. 대부분의 교사 들은 자신들이 출제한 문항의 지시문이 다소 모호해도 지시문에서 묻고 있는 내용이 교과서 에서 다루어지고, 자신뿐만 아니라 많은 사회과교사가 학생들에게 그 내용을 그렇게 가르치고 있다면 괜찮다고 생각한다. 그러나 서술형 문항을 개발할 때 유의해야 할 점은 수업 상황과 평가 상황이 구분되어야 한다는 것이다. 교과서에 내용이 제시되어 있더라도, 그리고 교사가 그렇게 설명했더라도 문항 지시문이 모호하게 제시된다면 학생이 서술한 어떤 내용도 정답이 될 수 있다. 따라서 서술형 문항의 지시문을 정교하게 구조화하고 채점기준, 예시 답안과도 일관성이 갖추어진다면 평가 결과에 따른 시비를 많이 줄일 수 있을 것이다. 그리고 시간이 제한된 상황에서 학생들이 복잡하고 긴 질문을 접하면 질문을 읽는 과정에 서 질문의 요지를 파악하기 어렵게 되고, 이것이 오차로 작용하여 실제 학생 능력을 낮게 평 가할 수 있다. 또한 지시문에서 내용을 길게 설명하면 내용에서 정답을 암시하는 내용이 포함 될 가능성이 높은데 지시문에 정답 방향이 포함되어 있다면 이 또한 피험자의 능력을 제대로 평가하지 못하는 결과를 가져온다. 다. 문항의 구조는 최대한 간결하게 제시한다. 문항의 구조는 최대한 간결하면서도 문항에 꼭 필요한 요소만 제시해야 한다. 문항의 구조 가 복잡하고 자료의 개수가 많으면 문항에서 묻고자 하는 내용이 잘 전달되지 않을 위험이 있다. 따라서 문항에서 측정하고자 하는 내용이 변함이 없다면 구조와 자료를 단순화하는 것 이 측정하고자 하는 내용을 명료화할 수 있다. 대체로 교사들이 흔히 저지르기 쉬운 실수는 문항이 그럴듯하게 보이기 위하여 반드시 필요한 자료가 아니어도 제시하는 것이다. 자료와 보기 등이 복잡하게 제시된 경우 학생들이 자료를 읽고 문항의 구조를 파악하는 데 시간을 소비하기 때문에 질문의 내용에 대해 숙고할 시간이 줄어들고 따라서 학생 능력을 제대로 측 정하지 못할 수 있다. 그러므로 문항의 자료와 구조를 최대한 간결하게 제시해야 한다. 라. 개념이나 용어를 쓰도록 하지 말고, 개념이나 용어의 정의나 의미를 설명하도록 한다. 용어나 개념을 묻는 문항은 지식의 암기나 이해 정도를 묻는 데 적합하다. 용어의 정의나 개념의 의미를 묻는 경우 용어의 정의나 개념의 의미를 질문에 제시하고 답지에 용어나 개념 을 쓰도록 구조화된 문항은 용어를 구분하는 능력을 측정할 뿐 용어에 대한 정확한 이해 정 도를 측정하기 어렵다. 따라서 용어나 개념에 대한 정확하고 깊이 있는 이해를 측정하기 위해 서는 용어나 개념을 질문지에, 그리고 그에 대한 정의나 설명 등을 답지에 쓰도록 하는 것이 예를 들어 감입곡류하천의 개념과 특징을 이해하고 있는지를 평가하고자 한다면 질문에 감입 곡류하천에 대한 설명을 제시하고 답지에서 감입곡류하천을 쓰도록 하기보다 질문에 감입곡 류하천의 지형적 특징과 형성 과정에 대하여 쓰시오 라고 개념을 제시하고, 답지에 감입곡류 하천에 해당하는 설명을 쓰도록 하는 것이 좋다. - 28 -
제1부 총 론 4. 서술형 평가도구 개발 및 채점의 실제 가. 평가도구 개발의 실제 서술형 평가 문항을 개발하고 시행할 때 가장 큰 문제는 채점이다. 정 오답 판단에 대한 문 제를 해결하기 위한 가장 좋은 방법은 평가하고자 하는 목적을 구체적으로 제한하고, 충분한 자료를 제시하며, 정답의 방향을 지시해주는 응답 제한형 질문으로 문항을 구조화하는 것이 다. 응답 제한형 문항은 요구하는 답이 분명하기 때문에 답을 적당히 추측해서 쓸 위험이 줄 어든다. 응답 제한형 문항을 개발하기 전에 반응의 자유를 어느 수준에서 허용할 것인지를 사 전에 판단하는 것이 좋다. 예시문항 1 은 2006년 대학교 사회과교육과정 및 평가론 시간에 수강생이 개발한 서술형 문 항이다. 예시문항 1 의 한국 사회가 전통사회에서 현대사회로의 변동특성과 각 사회에서 나타나 는 특징을 서술하라 는 질문은 응답이 제한되지 않고 무한히 열린 구조를 지닌다. 예시문항 1 한국 사회의 전통사회와 현대사회로의 변동특성과 각 사회에서 나타나는 특징을 간 단히 서술하시오. 예시정답 전통사회에서 현대사회로의 변화의 가장 큰 사회적 변화는 닫힌사회에서 열린사회로 변 화하였다는 것이다. 전통사회에서는 공동체의 가치가 존중되나 남성중심사회, 경직된 상하의식, 개성 상실, 여성참여 제한의 특성이 나타나고 이에 반해 현대 사회에서는 자율화, 개방화, 다원화에 따른 남성과 여성의 공존사회, 열려있는 인간관계 및 개성존중의 특징이 나타난다. 문항개발자가 제시한 예시 정답은 다음에 제시한 바와 같이 전통사회에서 현대사회로의 변 화의 가장 큰 사회적 변화는 닫힌사회에서 열린사회로 변화하였다는 것이다. 전통사회에서는 공동체의 가치가 존중되나 남성 중심 사회, 경직된 상하 의식, 개성 상실, 여성 참여 제한의 특성이 나타나고 이에 반해 현대 사회에서는 자율화, 개방화, 다원화에 따른 남성과 여성의 공존사회, 열려있는 인간관계 및 개성존중의 특징이 나타난다. 이다. 그러나 아마도 예시정답 처럼 기술한 학생 답안은 약 10%도 되지 않을 것이다. 문제는 예시정답처럼 답안을 기술하지 않은 많은 피험자도 문항개발자가 예시정답으로 미처 생각하지 못한 현대사회로의 변동 특성, 전통사회의 특징, 현대사회의 특징을 나름대로 논리적으로 기술할 수 있다는 것이다. 그렇다 면 채점자는 피험자 모두의 답안 하나하나에 대하여 정 오답을 판단해야 하고, 판단의 과정에 서 주관이 개입할 여지가 많아 검사의 신뢰도는 저하될 수밖에 없다. 이러한 문제를 방지하기 위하여 예시문항 1 의 경우 현대사회 변동 특성 중에서도 문항개발자가 묻고자 하는 특성 을 추출한 후 관련 자료를 제시하고, 반드시 그 특성에 국한하여 서술하도록 구조화하고, 분 량 등을 제한하는 방식으로 수정한다면 채점의 문제는 상당 부분 해결될 수 있을 것이다. 예 를 들어 예시문항 2 의 경우 2003년 고등학교 사회 학업성취도 평가 문항인데, 이 문항은 문화지체 와 관련된 사례 3가지를 제시하고 이들 사례에서 공통적으로 발견되는 현상과 그 의미를 서술하라 는 것이다. 이 문항의 경우 답안 서술의 방향을 구체적으로 지시해주는 문항 으로 예시문항 1 에 비하여 채점의 어려움이 덜하다. - 29 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 예시문항 2 다음 사례들에서 공통적으로 발견되는 우리 사회의 문제 현상과 그 의미를 서술시오. 초고속 통신망 가입률이 세계 1위로 올라섰지만 동시에 인터넷을 통한 명예 훼손이나 개인 정보 유출 등 사이버 범죄가 급속하게 증가하고 있다. 65세 이상 노인 인구가 급속하게 증가하여 고령화 사회로 접어들었지만 노인들을 위한 복지 제도가 미흡하고, 노인에 대한 편견이 여전히 사라지지 않고 있다. 자동차의 대중화와 교통망 확충으로 전국이 1일 생활권으로 좁혀졌지만 운전자들의 교통 법규 준수 의식은 여전히 낮은 것으로 나타나고 있다. 고등학교 이 교사는 자유곡류하천과 감입곡류하천의 형성 과정과 그 지형적 특징 및 이용을 비교할 수 있다 라는 성취기준을 학생들이 어느 정도 성취했는지 평가하기 위하여 3 점짜리 서술형 문항인 예시문항 3 을 개발하였다. 그가 이와 같은 성취기준을 평가하기 위 하여 서술형 문항을 선택한 이유는 자유곡류하천과 감입곡류하천의 형성 과정과 그 지형적 특징 및 이용에 대하여 학생들이 어느 수준에서 알고 있는지를 평가하는 데 적합하다고 판단 하였기 때문이다. 그는 수업시간에 자유곡류하천과 감입곡류하천에 대한 지도와 사진을 보여 주며 학생들에게 다음과 같이 설명하였다. 자유곡류하천은 넓은 범람원상을 흐르는 하천으로 ppt에 제시된 지도와 사진에서 볼 수 있듯이 굴곡이 심한 하천이다. 자유곡류하천은 소규모 하천의 하류나 대하천의 지류에서 주로 발달하고 하 천과 주변 지역 간에 고도차가 거의 없이 평탄하기 때문에 홍수가 나면 유로 변경이 잦다. 그리고 이곳 주변은 범람원이 넓어서 대부분 논으로 이용되고 있다. 반면, 감입곡류하천은 지도에서 볼 수 있듯이 골짜기를 따라 곡류하여 흐르는 하천이다. 감입곡류하천은 하천 상류의 산간 지역에서 잘 발 달하고 하천과 주변 지역 간의 고도차가 크다. 그래서 주변의 하안 단구에는 농경지, 도로, 촌락 등 이 발달하고 있다. 그는 수업시간에 보여주었던 자유곡류하천과 감입곡류하천의 지도를 제시한 후 이와 같은 하천 유형을 무엇이라고 하는지 쓰시오 라는 단답형 문항과 두 지도를 보고 각 하천 주변의 지형적 특징과 농경지가 각각 어떻게 이용되고 있는지를 비교하여 설명하시오 라는 서술형 문 항을 개발하였다. 그는 단답형 문항과 서술형 문항 모두 문항 구조를 단순화하고, 요구하는 정답의 방향을 분명하게 제시함으로써 정 오답 논란의 위험을 최소화하고, 정답을 알지 못한 학생이 추측해서 쓸 수 없도록 구조화하고자 노력하였다. 예시문항 3 다음 지도에 나타난 A, B와 같은 하천 유형을 각각 무엇이라 일컫는지 쓰시오. 그리고 각 하 천 주변의 지형적 특징과 농경지가 각각 어떻게 이용되고 있는지를 비교하여 설명하시오.(150자 내외) - 30 -
제1부 총 론 그리고 그는 문항을 개발하는 과정에서 모범답안을 작성하고 3점에 대한 채점기준을 3단계(3점/2 점/1점)로 구분하여 개발하였다. 서술형의 경우 2~3단계 정도 수준으로 구분하여 채점기준을 작성 하고 채점하는 것이 좋다. 그가 작성한 모범답안과 채점기준은 다음과 같다. 모범답안 A는 자유 곡류 하천이고 B는 감입 곡류 하천이다. 두 지도를 비교해 볼 때, 평야 지대를 흐르는 A의 자유 곡류 하천주변에는 평탄하고 넓은 범람원이 발달하여 벼농사가 주로 이루어지고 있다. 반 면, 산지 사이를 흐르는 B의 감입 곡류 하천은 하천과 주변 지역 간의 고도차가 크게 나타나며, 하 안 단구가 발달한 곳에 밭농사가 널리 행해지고 있다. 채점기준 평가요소 수준 3점 2점 1점 곡류 하천의 종 류 및 특징 곡류 하천의 종류 두 가지와 경관상의 특징을 비교 서술하였다. 곡류 하천의 종류 두 가 지만 작성하거나, 경관상의 특징만을 비교 서술하였다. 곡류 하천의 종류 한 가지만 제시하였다. 나. 채점의 실제 아무리 제한된 구조로 질문하여도 학생들의 답안은 다양하기 마련이다. 따라서 개발하는 과 정에서 가능한 답안을 모구 고려하여 채점기준을 개발하고, 본 채점 시작 전에 피험자 답안의 약 5%를 표집하여 가채점한 후 채점기준을 수정 보완할 필요가 있다. 채점기준이 완성되면 그 기준을 일관적으로 적용하여 채점해야 한다. 기말고사를 치르고 난 후 이 교사는 예시문항 3 에 대한 학생들의 답안지 중 약 5% 정 도인 25명의 답안지를 가채점하였는데, 그 결과 자신의 채점기준을 가지고 채점할 경우 점수 판단이 어려운 경우가 많이 발생한다는 것을 깨달았다. 지시문은 자유곡류하천과 감입곡류하 천 주변의 지형적 특성과 관련하여 토지이용이 어떻게 이루어지는가? 이며, 학생들도 질문의 취지를 이해하고 매우 구체적인 답을 작성하였다. 그러나 처음 개발한 채점기준을 적용하여 채점을 해 본 결과 학생들의 능력을 변별하여 정확한 점수를 부여하기가 어려웠다. 만약 채점 자가 여러 명이었다면 채점자의 주관이 많이 반영되어 다양한 채점결과가 나왔을 것이다. 예 를 들어 이 교사가 처음 개발한 채점기준을 가지고 [그림 1]~[그림 3]에서 볼 수 있는 가학 생, 나학생, 다학생의 답안지를 채점한다고 해보자. - 31 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 [그림 1] 가학생의 답안지 [그림 2] 나학생의 답안지 - 32 -
제1부 총 론 [그림 3] 다학생의 답안지 가학생, 나학생, 다학생 모두 하천 유형의 명칭을 정확하게 기술하였으나, 가학생의 답안지 는 지형적 특징에 대해서는 기술하지 않고 농경지 이용만을 A주변은 논농사로 이용되고, B 주변은 밭농사로 이용된다. 고 기술하였고, 나학생의 답안지는 A하천 주변은 경사가 완만하 여 논으로 이용되는 곳이 많고, B하천 주변은 경사가 급하여 논보다 밭이 많다 고 지형적 특 징과 농경지 이용 모두 기술하였다. 그리고 다학생 답안지는 A주변은 평탄하고 넓은 범람원 이 발달하여 벼농사가 주로 이루어지고 있다. 반면 B주변은 산지로 이루어져 있어 하안단구 가 발달한 곳에 밭농사가 널리 행해지고 있다 고 기술하여 하천 주변의 지형적 특징을 나학생 보다 정확하게 기술하고 있다. 이들 세 명의 답안지를 위에 제시한 채점기준을 가지고 채점해보자. 여러분은 가학생, 나학 생, 다학생의 답안지에 각각 몇 점을 부여하였는가? 이 교사는 이들 학생 답안지를 채점한 결 과 가학생 답안지에 2점을 부여해야 할지, 3점을 부여해야 할지 판단하기 어렵고 나학생과 다 학생의 답안지를 비교해보면 두 학생의 하천 주변의 지형적 특징에 대한 이해 수준 차이가 있 음에도 불구하고 점수 차이를 줄 수 없다는 것을 알았다. 만약 가학생 답안지에 3점을 부여한 다면 이 교사가 문항개발과정에서 개발한 채점기준은 이들의 자유곡류하천과 감입곡류하천의 지형 차이에 대한 이해 수준이 모두 다름에도 불구하고 같은 점수를 받게 되는 문제가 있다. 이러한 문제를 해결하기 위하여 이 교사는 학생들의 이해 수준을 변별하여 점수를 부여하 고 다른 사람에 의해 채점이 이루어진다하더라도 일관된 채점결과가 나올 수 있도록 채점기 준을 다음과 같이 수정하였다. 첫째, 곡류하천의 명칭에 1점, 곡류하천 주변의 지형적 특징과 토지이용에 2점을 부여한다. 둘째, 곡류하천의 명칭의 경우 곡류하천의 명칭 두 가지 모두 정 확하게 기술하였으면 1점, 곡류하천의 명칭을 한 가지만 정확하게 기술하였으면 0.5점을 부여 한다. 셋째, 곡류하천 주변의 지형적 특징과 토지이용의 경우 자유곡류하천과 감입곡류하천 주변의 지형적 특징과 관련하여 토지이용이 각각 바르게 설명되었으면 2점, 자유곡류하천과 - 33 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 감입곡류하천 주변의 일반적 토지이용은 바르게 설명되었으나 지형적 특징과의 관련성의 설 명이 부족하면 1점, 자유곡류하천과 감입곡류하천 주변의 일반적 토지이용만 바르게 설명되었 으나 지형적 특징은 언급되지 않았으면 0.5점을 부여한다. 수정된 채점기준 곡류하천의 명칭 (1점) 1점 곡류하천의 명칭 두 가지 모두 정확하게 기술하였다. 0.5점 곡류하천의 명칭을 한 가지만 정확하게 기술하였다. 곡류하천 주변의 지형적 특징과 토지이용 (2점) 상 (2) 중 (1) 하 (0.5) 자유곡류하천과 감입곡류하천 주변의 지형적 특징과 관련하여 토지이용이 각각 바르게 설명되었다. 자유곡류하천과 감입곡류하천 주변의 일반적 토지이용은 바르게 설명되었으나 지형적 특징과의 관련성의 설명이 부족하다. 자유곡류하천과 감입곡류하천 주변의 일반적 토지이용만 바르게 설명되었으나 지형적 특징은 언급되지 않았다. 그리고 그는 학생들에게 수정된 채점기준을 공지하여 이의신청을 받은 후 최종 채점기준을 확정하고 본 채점을 실시하였다. 가학생, 나학생, 다학생 답안지에 대하여 수정된 채점기준을 적용하여 채점한 결과 가학생은 1.5점, 나학생은 2점, 다학생은 3점을 받았다. - 34 -
제1부 총 론 4 창의성 계발을 위한 평가 개선 기본 계획 서울특별시교육청 - 35 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 1. 추진 근거 초 중등교육법 제25조(학교생활기록) 서울특별시학업성적관리시행지침(2007) 교육과학기술부 창의 인성교육 기본방안 발표(2009.12.31) 2. 추진 배경 지식정보화사회는 새로운 아이디어와 지식 창출이 개인 및 국가 발전 을 좌우하므로 미래사회가 요구하는 창의적 인재 육성 교육 본질인 창의성과 문제해결력 신장을 위하여 평가방법 전환을 통해 학교 수업방법의 변화 도모 창의성 이란? 창의성은 사회 문화적 맥락에서 가치 있고 실현 가능한 독창적 사고나 산출물을 만들어 낼 수 있는 능력임 창의적 사고의 특성에는 많은 양의 아이디어를 산출하는 유창성, 사고나 시각을 변화시켜 해결책을 찾는 융통성, 새로운 아이디어를 창출하는 독 창성, 기존 아이디어를 발전시키는 정교성, 환경 변화에 따라 새롭게 반 응하는 민감성 등이 있음 <출처> 한국교육개발원(2002), 창의성 계발 교수 학습 모형에 따른 교사용 지도서 서술형 문항 이란? 7) 서술형 문항은 출제자가 제시한 문항에 대하여 학생이 답이라고 생각하는 지식이나 의견 등을 직접 서술 하는 방식임 서술형 문항의 유형에는 내용, 분량 등 서술 방식을 제한하는 응답 제한형 (restricted response varieties)과 서술방식에 특별한 제한이 없는 응답 자유 형(extended response varieties)으로 나눌 수 있음 정기고사에서는 내용, 분량 등 서술방식을 제한하는 응답 제한형이 주로 사용되는데, 예를 들면 차이점 3가지를 제시하시오, 300자 이내로 설명 하시오, 풀이과정을 쓰시오 등이 있음 논술형 문항은 학생 나름대로의 생각이나 주장을 논리적으로 설득력 있게 기술하며, 주로 서론 본론 결론 등으로 조직하여 작성 <출처> 백순근, 교육 측정의 이론과 실제 (2007), 수행평가의 원리 (2000) 7) 지필평가는 선다형, 진위형, 연결형 등의 선택형(selection type) 문항과 단답형, 완성형, 서술형, 논술형 등의 서답형(supply-type) 문항으로 구분됨 - 36 -
제1부 총 론 3. 현황 및 시사점 가. 현 황 중 고등학교의 경우 2005년부터 서술형이나 논술형 평가 문항 출제를 확 대해왔으며, 초등학교의 경우는 별도의 기준이 없었음 중등 (중1~고3) 2005년 2006년 2007년 2008년 2009년 30% 40% 50% 50% 50% 정기고사에서 선택형, 단답형, 완성형 문항 출제가 많이 이루어짐 8) - 평가의 신뢰성, 채점의 편의성 등으로 선택형 평가 문항 선호 - 고사시간(50분 이내), 채점 부담 등을 고려하여 단답형, 완성형을 일부 출제 학생들은 단편적인 지식 암기에 치중하게 되어 창의성 계발에 소홀하 고 학교교육의 전반적인 입시위주 점수위주 교육 초래 * 정형화된 지식의 반복학습을 통해 실수하지 않는 것이 실력 이라는 학습풍토 조성 PISA 2006의 57개 참가국 중 한국의 과학 능력별 성취도 위치(전체 11위) - 과학적 문제 인식 11위, 현상에 대한 과학적 설명 18위, 과학적 증거 이용 5위 과학지식을 적용하여 과학적으로 현상을 기술 해석하는 능력은 상대적으로 미흡 PISA 2006의 읽기 문항 유형별 정답률(한국 : 전체 1위)과 참가국 전체 평균 차이 - 선택형 80.1점(+12.4), 단답형 58.4점(+12.9), 개방형서술형 72.4점(+21.0) 서술형문항에 대한 정답률이 향상된 것(2003년 대비 약6% 상승)은 90년 대 후반부터 도입된 수행평가가 국어과의 주요한 평가방법으로 자리매 김했기 때문 <출처> 한국교육과정평가원(2007), PISA 2006 결과 분석 연구 핀란드의 경우 사지선다형 문항은 매우 드물며, 초등학교부터 다양한 문 항유형에 노출되고 서술형문항을 접하고 있음 <출처> 한국교육과정평가원(2008), 국제교육 연구 사업-세계 각국의 동향 창의성 계발을 위한 평가 관련 교사 연수 부족 - 발명반, 과학영재반 운영 과학 교사에 한하여 시행 중 학교생활기록부에 학생의 창의성 관련 기록이 미흡 8) 정기고사 문제유형별 출제비율(배점기준) : 선택형 56%, 단답형(완성형 포함) 21%, 서술형 23% <자료> 고교 20교의 2007년 1학기 기말고사(국어, 사회) 조사 - 37 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 나. 시사점 우리가 살아가는 지식정보화 사회는 창의적인 인재를 요구하므로, 학교는 새로운 아이디어와 지식을 창출하고 자신의 생각을 스스로 표현할 수 있 도록 가르쳐야 함 주입식, 단순 지식 암기 위주의 수업은 창의성을 키워주는 방향으로 변화 되어야 하며, 무엇보다 평가 방법의 개선이 필요함 정기고사에서 선택형, 단답형, 완성형 문항보다 학생의 창의성과 표현력 을 키워주는 서술형 평가를 초등학교부터 시행 특정 주제에 대한 논술, 실험 관찰보고서 등 교과의 특성에 적합하게 교육과정 속에서 이루어지는 수행평가의 활성화 아울러, 창의성 관련 수업 내용과 평가 결과를 학교생활기록부에 기록 하여 입학사정관제 전형자료 등 상급학교 진학 자료로 제공할 필요성이 요구됨 4. 세부 추진 계획 기본 방향 창의성 계발을 위한 평가문화 기반 조성 평가방법 변화를 통한 교수 학습 패러다임의 전환 유도 서술형 평가 확대 서술형 평가 문항 출제 미흡 단답형, 완성형 포함 서술형 평가 문항의 단 계적 확대 단답형, 완성형 지양 특색있는 수행평가 활성화 수업태도, 준비물 점검 등 교과의 특성이 나타 나지 않는 평가 시행 교실수업 속에서 교과 의 특성을 반영한 다양 한 수행평가 시행 창의성 관련 학생부 기재 내실화 학교생활기록부의 교과 학습란에 창의성 관련 학생활동 기재 미흡 창의성 관련 교육활동 및 평가 결과의 학생부 교과학습란( 세부능력 및 특기사항 ) 기재 - 38 -
제1부 총 론 가. 중점 추진 과제 : 창문 열기 프로젝트 9) Ⅰ 서술형 평가 문항 확대 정기고사 중 서술형 평가 문항의 반영비율 확대 대상 구분 학년도 2005 2006 2007 2008 2009 2010 2011 2012 초등 (초3~ 초6) 총 서답형 반영 비율 서술형 반영 비율 - - - - - - - - - - 50% 이상 30% 이상 50% 이상 40% 이상 50% 이상 50% 이상 중등 (중1~ 고3) 총 서답형 반영 비율 서술형 반영 비율 10) 30% 이상 40% 이상 50% 이상 50% 이상 2009년까지는 서답형에는 단답형 완성형 포함 50% 이상 50% 이상 30% 이상 50% 이상 40% 이상 50% 이상 50% 이상 1 초등학교 3학년부터 서술형 문항 반영비율을 2012년까지 단계적으로 높 여나감(초등학교 1,2학년은 제외) 2 국어 사회 수학 과학 영어 교과(주당 3시간 이상)를 우선 적용하되, 이외 교과는 학교 특성에 맞게 자체 추진 3 초 3 4학년 준비 과정 운영 : 2010년 1학기에는 학교가 반영 비율을 자율적으로 정하고 학생에게 독서와 쓰기 지도 실시 Ⅱ 교과별 특색있는 수행평가 활성화 창의성과 문제해결력을 키워주는 다양한 수행평가 시행 교과의 특성에 맞는 다양한 수행평가의 시행 - 작문, 사회 등의 교과에서는 교과의 특성을 고려하여 특정 주제에 대한 논술, 연구보고서 등 논술형 평가 시행 - 과학 교과의 경우 실험 실습 평가 시행 - 영어 교과의 경우 말하기(10% 이상) 듣기 쓰기 평가 시행 9) 창의력 과 문제해결력 의 첫 글자를 따온 것으로, 학생들에게 창의성과 문제해결력을 키워주기 위해 서술 형 평가를 확대하고 수행평가를 강화하는 등 평가방법 개선에 노력하고 이를 지원하는 프로젝트 10) 2010년 이후에는 단답형 완성형을 제외한 순수한 서술형 문항의 반영 비율을 높여나감 - 39 -
창의력과 표현력을 키워주는 서술형 평가 장학자료집 교과별 평가 방법 - 국어 : 듣기 말하기 읽기 쓰기 문법 문학 등의 영역에서 지필평가, 연구 보고서법, 자료철, 면접법, 구술평가, 토론법, 관찰법 등 - 사회 : 지필평가, 면접, 체크리스트, 토론, 논술, 관찰, 활동보고서, 포트폴 리오 등 - 수학 : 지필평가, 관찰, 면담 등을 활용하되, 결과뿐만 아니라 과정도 중시 - 과학 : 지필평가, 관찰, 실험 실습보고서 검토, 실기검사, 면담, 포트폴리오 등 다양한 방법을 사용하며, 자유 탐구 의 경우 학생 활동 관찰, 보고서 검토 등을 주로 활용 - 영어 : 듣기, 말하기, 읽기, 쓰기 등의 기능을 균형 있게 평가(쓰기는 초3 제외) 출처 : 교육인적자원부(2007), 초 중등학교 교육과정 Ⅲ 입학사정관제 대비 창의성 관련 학생부 기재 내실화 교과학습발달상황의 세부능력 및 특기사항 란에 각종 평가를 통해 드러난 학생의 창의적 활동 내용을 구체적으로 기재 창의적 교과학습활동 학생부 기재 사례집 제작 및 연수 실시 각 대학에 제출하는 학교프로파일에 창의적 교과학습활동을 포함 - 필요한 경우 창의성 관련 교육활동 및 평가 내용을 기재 - 대교협(전문대교협)과 기재 내용 협의 학교생활기록부 교과학습 평가방식 개선 검토 - 교과부 2010 업무보고 입학사정관제 도입에 따라 학생의 창의성 인성 잠재력 등도 대학입학 을 결정하는 중요 요소로 등장 - 교과부 창의 인성교육 기본 방안 ( 09.12.31) 입학사정관제 전형에서는 교과성적도 중요시하고 있으며, 모집단위에 적 합한 교과영역의 특기사항 내용이 중요할 수 있음 - 진학지도 전문교사 나. 평가 개선 지원 방안 신뢰받는 평가문화 조성 교과협의회(동학년협의회) 중심의 평가 개선방안 도출 및 시행 - 채 점방안 협의, 공동출제, 공동채점 등 신뢰도 제고 노력 학생의 평가결과 확인 절차(이의신청 기간 부여 등)를 사전 공고 후 시행 - 40 -