문제은행을 학년·단원으로만 나누면 안 되는 이유

폴더는 한 문항을 한 자리에만 둔다

학년 → 단원 → 문항으로 나누는 방식의 근본 한계가 여기 있다. 한 문항이 정확히 한 폴더에만 들어간다.

그런데 실제 문항은 그렇게 안 생겼다. 「분수 나눗셈이 들어간 비율 문장제」는 분수 폴더에 넣어야 할까 비율 폴더에 넣어야 할까. 어느 쪽에 넣든 다른 쪽에서 찾을 때는 안 나온다.

이걸 해결하려고 폴더를 더 잘게 쪼개기 시작하면 상황이 나빠진다. 「5학년 > 분수 > 나눗셈 > 대분수 > 문장제」까지 내려가면 각 폴더에 문항이 두세 개씩 남고, 어디에 뭘 넣었는지 본인도 모르게 된다.

단원 이름은 교과서마다 다르다

또 하나의 함정이다. 같은 내용인데 출판사에 따라 단원 이름이 다르고, 교육과정이 바뀌면 학년도 옮겨 다닌다.

「분수의 나눗셈」으로 폴더를 만들어 두었는데 개정으로 그 내용의 일부가 다른 학년으로 가면, 폴더 이름과 실제 내용이 어긋나기 시작한다. 몇 년 쌓인 문항일수록 이 어긋남이 크다.

교과서 목차를 그대로 폴더로 옮기지 말고, 내용 자체로 이름을 붙이는 편이 오래간다. 「5학년 2단원」보다 「분모가 다른 분수의 덧셈」이 낫다.

태그로 옮길 때 정해야 할 것

한 문항에 여러 이름표를 붙이는 방식으로 옮기면 앞의 문제는 풀린다. 대신 새 문제가 생긴다 — 이름표를 아무나 아무렇게나 붙이면 태그가 수백 개로 늘어난다.

「분수나눗셈」, "분수 나눗셈", "분수의 나눗셈"이 따로 존재하는 상태가 되면 태그가 있으나 마나다. 자유롭게 붙이는 태그와 정해진 목록에서 고르는 태그를 나눠야 한다.

실무적으로는 축을 몇 개로 고정하고 각 축의 값을 정해 두는 방식이 잘 굴러간다.

난이도는 감이 아니라 기록으로

난이도 태그를 붙일 때 대부분 감으로 정한다. 그런데 감은 자주 틀린다. 내가 「하」라고 붙인 문항의 정답률이 40퍼센트인 경우가 드물지 않다.

시험을 치고 나면 문항별 정답률이 남는다. 이걸 문항에 되돌려 붙이면 난이도가 기록이 된다. 처음 붙인 「중」을 실제 정답률이 고쳐 주는 식이다.

몇 학기가 쌓이면 이게 문제은행의 가장 값진 부분이 된다. 「정답률 50퍼센트대에서 세 개」로 시험을 구성할 수 있게 되기 때문이다.

정답률은 반과 시기에 따라 달라지니 절대 기준은 아니다. 다만 같은 학교 같은 학년 안에서 비교하는 용도로는 감보다 훨씬 낫다.

중복이 쌓이는 것도 문제다

문항이 늘면 비슷한 것이 여럿 생긴다. 숫자만 다른 문항, 표현만 조금 다른 문항.

이게 왜 문제냐면 시험을 낼 때 그 둘이 동시에 뽑히기 때문이다. 같은 것을 두 번 묻는 시험이 된다.

완전히 막을 방법은 없지만, 문항을 저장할 때 「이것과 비슷한 것이 이미 있습니다」를 보여 주는 것만으로도 꽤 줄어든다. 그리고 일부러 만든 쌍둥이 문항은 같은 묶음으로 표시해 두면 시험 구성에서 하나만 뽑게 할 수 있다.

정리

폴더는 문항이 백 개일 때 편하고 오백 개일 때 불편하다. 한 문항이 한 자리에만 있기 때문이다.

축을 몇 개 정해 두고 값을 고르게 하되, 자유 태그도 하나 열어 둔다. 난이도는 감으로 붙이고 정답률로 고친다. 이 정도만 지켜도 문항이 몇 년치 쌓여도 찾을 수 있다.