한국어 언어 평가 개념과 설계: 목표 설정부터 결과 활용까지

• 언어 평가 목표와 항목

• 1) 언어 평가 목표

• 2) 언어 평가 항목

• 언어 평가 도구의 개발 절차 및 설계

• 1) 평가의 기획

• a. 평가 목표 설정과 세분화

• b. 평가 형태 결정

• 2) 평가 항목의 선별

• 3) 문항과 지시문 작성

• 4) 문항 검토와 사전 평가

• 5) 최종 형태 제작

언어 평가는 학습자의 언어 능력을 정확하게 측정하고, 교육 과정의 효율성과 효과성을 높이기 위해 필수적인 과정입니다. 효과적인 언어 평가 도구를 개발하고 설계하기 위해서는 언어 평가 목표와 항목, 평가 도구의 개발 절차, 그리고 평가 결과의 해석과 활용과 같은 주요 요소들을 철저히 이해하고 반영해야 합니다. 

 

 

이 글에서는 언어 평가 도구의 개념과 설계 과정을 상세히 살펴보겠습니다.

언어 평가 목표와 항목

1) 언어 평가 목표

언어 평가 도구는 평가 목적을 달성하기 위해 실제로 사용되는 구체적인 수단입니다. 이는 학습자의 언어 능력을 표본적으로 추출하여 측정하기 위해 특정한 언어 활동을 지시하는 역할을 합니다. 언어 평가 도구는 다음과 같은 특징을 가져야 합니다:

• 평가 목적의 균형적 반영: 평가 도구는 평가 목적에 따라 평가 목표를 균형 있게 담아낼 수 있어야 합니다.
• 학습 도구와의 연계성: 평가 도구와 평가 목표는 학습 도구와 학습 목표와의 관계와 비례할 수 있습니다.
• 측정 항목의 다양성: 어휘, 문법, 독해력, 청해력, 말하기 능력, 쓰기 능력 등의 수준 규정이 평가 목표에 포함됩니다.
• 평가 영역과의 밀접한 관계: 평가 영역은 읽기, 듣기, 쓰기, 말하기로 나누지만, 실제 언어 상황에서는 의사소통 능력 기능이 통합적으로 작용하기 때문에, ‘듣기와 말하기’ 등 두 개 이상의 기능을 통합한 영역으로 구성되기도 합니다.

2) 언어 평가 항목

평가 항목은 평가 목표의 구체적인 세부 요소 중에서 표본적으로 추출된 요소로, 문항 형태로 평가 도구에 포함됩니다. 주요 특징은 다음과 같습니다:

• 구체성: 평가 목표를 세부적으로 분해하여 구체적인 항목을 선정합니다.
• 표본 추출: 전체 영역을 대표할 수 있는 표본을 골고루 추출합니다.
• 문항 형태: 평가 항목은 문항이라는 형태로 유입되며, 이는 평가 도구의 구성 요소이자 채점의 기본 단위입니다.

언어 평가 도구의 개발 절차 및 설계

1) 평가의 기획

효과적인 언어 평가는 세심한 기획을 필요로 합니다. 평가 내용의 적합성과 균형, 전체 평가의 난이도에 대한 세심한 고려 없이는 타당한 평가 도구가 제작될 수 없습니다.

a. 평가 목표 설정과 세분화

• 목표 설정: 교과 과정의 목표를 기초로 평가 목표를 설정합니다. 예를 들어, 학기말 성취도 평가의 경우, 학기 초에 설정한 학업 목표 중 무엇을 평가할지 윤곽을 잡습니다.
• 세분화: 광범위한 평가 목표를 특정한 요소들로 나눕니다. 예를 들어, 어휘, 문법, 독해력, 청해력, 말하기 능력, 쓰기 능력 등을 구체적으로 개관합니다.

b. 평가 형태 결정

• 평가 형태 결정: 평가에 부여되는 시간, 평가 영역 구분, 각 영역의 시행 형태(지필고사, 수행 평가) 등을 결정합니다.
• 문항 유형 계획: 문항의 형태와 수를 계획하며, 실제 수험자들에게 부여되는 시간과 교사의 채점 시간을 고려합니다.

2) 평가 항목의 선별

평가 기획 단계에서 세분화된 평가 목표를 바탕으로 실제 평가 문항으로 제작할 평가 항목을 선별합니다.

• 목표 반영: 성취도 평가의 경우, 교과 과정 내용을 직접적으로 반영하여 평가 항목 목록을 작성합니다.
• 문항 내용 유형 목록: 평가 영역별, 항목별로 활용 가능한 문항 내용적 유형 목록을 마련하여 문제 은행의 기반으로 활용합니다.
• 통합적 평가: 이해력과 표현력을 통합적으로 측정할 수 있는 통합적인 평가 영역을 설정할 수 있습니다.
• 어휘 및 문법 평가: 어휘와 문법 요소는 다른 영역에 포함시키거나 별도의 영역으로 평가할 수 있으며, 평가의 목적에 따라 어휘와 문법 항목의 선택 기준을 설정합니다.

3) 문항과 지시문 작성

선별된 평가 항목을 바탕으로 실제 수험자에게 제시될 평가 문항과 지시문을 작성합니다.

• 문항 작성: 부적합한 문항을 삭제할 수 있도록 평가 항목보다 많은 수의 문항을 제작합니다.
• 문항 유형: 폐쇄형, 반 개방형, 개방형 등 다양한 형태의 문항을 포함시킵니다.

4) 문항 검토와 사전 평가

작성된 문항을 검토하고, 사전 평가를 통해 문항의 적합성과 효과성을 검증합니다.

• 문항 검토: 출제자가 문항을 재검토하고, 동료 출제자에게 검토를 의뢰하여 부족한 부분을 보완합니다.
• 사전 평가: 대규모 평가의 경우, 사전 평가를 통해 문항의 난이도와 변별도를 판단합니다.
  • 난이도 확인: 각 문항에 정답으로 응답한 수험자의 비율을 확인합니다.
  • 변별도 확인: 상위권과 하위권 수험자의 응답 패턴을 분석하여 문항의 변별도를 평가합니다.

5) 최종 형태 제작

사전 평가를 바탕으로 유용한 문항들을 선별하고 수정한 후, 최종 평가 도구를 제작합니다.

• 배점 결정: 각 문항에 대한 배점을 설정하고, 문항을 난이도 순으로 배열합니다.
• 문항 배열: 쉬운 문항에서 어려운 문항으로 차차 증가시키며, 마지막 문항은 우수한 수험자들이 정답을 맞출 수 있도록 배치합니다.
• 문제지 제작: 문제지의 시각적 형태와 질을 고려하여 수험자의 수행에 영향을 주지 않도록 주의합니다.
• 답안지 제작: 문제지와 분리된 답안지를 제작하여 채점의 용이성을 높입니다.
• 지침서 작성: 출제자와 시험관이 다른 경우, 시험 진행에 필요한 지침서를 작성하여 평가의 일관성을 유지합니다.