오늘 영상은 이렇게 갑니다

답안은 쌓이는데, 같은 눈높이로 읽기가 어렵다

• 서술형 답안이 수십 장 쌓이면 한 장씩 읽고 점수와 이유를 적는 데 시간이 오래 걸린다
• 피곤해지면 앞쪽 답안과 뒤쪽 답안에 점수를 다르게 주게 된다
• 학생이 «왜 이 점수예요?» 하고 물으면 이유를 다시 찾아 읽어야 한다
• → 채점이 늦어지고, 일관성은 흔들린다

예비 점수표와 교사가 볼 답안 표시

근거: 교육혁신연구 34권 1호(2024), ChatGPT 연결 서술형 자동채점 프로그램 실행연구 — 교사가 정한 채점 기준을 AI가 이해해 점수·평가 의견을 주고, 평가자를 여럿 두어 점수를 서로 견주면 채점 오차를 줄일 수 있다고 정리 · Anthropic 교육 보고서 — 채점 대화의 48.9%가 자동화 중심이었지만 교육자들은 채점을 AI가 도움이 가장 덜 되는 영역으로 보고, 완전 자동화는 우려했다

총점 하나만 물으면 이유를 알 수 없다

판단하기 어려운 답안은 짐작해서 채점하지 않는다

학생 정보는 번호로만, 점수는 교사가 확정

Code 화면에서 폴더를 연다

압축을 풀면 폴더 6곳, 파일 46개가 나옵니다

zip을 내려받아 압축을 푼 뒤, 그 폴더를 Code 화면에서 엽니다. 모든 파일은 교육용 가상 자료입니다.

답안은 파일 38개, 모양이 제각각이다

앞서 만든 채점 기준표가 오늘의 잣대다

«평가 문항과 채점 기준표(루브릭) 초안 만들기»의 결과 (이번 실습용으로 새로 만든 예시 · 12점 만점)

사람이 정한 채점 규칙을 먼저 알려 준다

내용을 읽고 고른다

연 폴더에서 이렇게 치기 Claude Code

이 폴더가 JJ교육연구원 청소년 논술 과정 2학기 서술형 평가 자료야. 어떤 파일이 어디 있는지 폴더별로 정리해줘.
이름이 비슷하거나 오래돼 보이는 파일, 내용이 비어 있는 파일, 이번 일이랑 상관없어 보이는 파일은 따로 알려줘.
원본은 절대 고치지 마.

처음 보는 폴더는 «뭐가 있는지»부터 묻고, «원본은 절대 고치지 마»를 잊지 않는다

같은 창에 이어서 Claude Code

03_명단_시범의 명렬표와 01_답안의 파일을 번호로 맞춰줘.
(복사본) 파일은 같은 답안이면 한 번만 보고, 답안이 없는 학생은 미제출로 알려줘.
파일 이름과 안에 적힌 이름이 다른 파일도 알려줘. 내가 안 준 내용은 지어내지 말고 (확인 필요)라고 표시해줘.

복사본까지 세면 한 학생이 두 번 채점되고, 미제출을 놓치면 누가 빠졌는지 모른 채 지나간다

채점을 시작하기 전에 Claude Code

03_명단_시범에 내가 먼저 채점한 5장이 있어. 02_기준표의 최신 채점 기준표로 같은 5장을 채점해서 내 점수랑 기준마다 나란히 비교해줘.
다른 칸은 왜 다르게 봤는지 이유를 말해줘. 내가 정하기 전에는 점수를 바꾸지 마.

다른 칸의 이유: 두 번째 사례가 우리 학교 이야기인지 글만으로 분명하지 않다 → 이렇게 갈리는 칸이 사람이 봐야 할 칸 · 이 5장은 교사 점수를 그대로 쓴다

기준이 맞으면 이어서 Claude Code

시범 5장 말고 01_답안의 나머지 답안을 채점 기준표대로 채점해줘.
답안마다 주장, 근거, 구성, 표현 점수를 따로 매기고, 점수를 준 이유를 기준표 문구로 한 줄씩 적어줘.
빈 답안, 사진, 문제와 상관없는 내용, 거의 같은 글은 점수를 붙이지 말고 따로 모아줘. 애매한 답안은 점수를 붙이되 표시해줘. 이름 대신 번호로 써줘.

32 + 5 + 1 = 38 · 점수 있는 32장 중 4장은 «확인 표시»가 붙는다

몇 장은 직접 읽어서 이유가 맞는지 본다

이유가 답안 내용과 다르면 → «1번 근거는 이유가 한 가지뿐이니까 2점으로 다시 봐줘»처럼 한 장씩 고쳐 달라고 한다 · 빨간 줄은 확인 표시가 붙은 답안

채점이 끝나면 이어서 Claude Code

점수를 붙이지 않은 답안과 확인 표시를 단 답안만 따로 모아서 표로 만들어줘.
번호, 점수를 붙였는지, 이유를 알려줘. 거의 같은 글은 몇 퍼센트쯤 같은지 알려주되 누가 베꼈는지는 말하지 마.
개인 사정이 적힌 답안은 그 내용을 옮겨 적지 말고 선생님이 확인하라고만 적어줘.

점수를 붙이지 않은 5장 + 확인 표시 4장 = 9장 · 나머지 28장은 교사가 이유만 훑어봐도 된다

일관성을 확인하고 싶을 때 Claude Code

점수 있는 답안을 처음 채점한 점수는 보지 말고 한 번 더 채점해줘.
처음 점수와 비교해서 달라진 답안이 몇 장이고 어느 기준인지 알려줘.
달라진 건 점수를 바꾸지 말고 표로만 보여줘.

점수가 흔들리는 답안은 사람이 읽어야 하는 답안이라는 신호다 · 확인 표시를 단 답안과 겹치는지 본다

점수가 나오면 이어서 Claude Code

점수 있는 답안의 합계 점수 분포와, 기준별 평균이 만점의 몇 퍼센트인지를 막대 그림으로 나란히 보여줘. 가장 많은 점수와 가장 낮은 기준은 빨갛게 표시해줘.

교육용 가상 폴더 기준 32명 · 평균 8.9점/12점 · 가장 낮은 기준은 근거(62%) → 수업에서 더 다룰 부분

그림까지 봤으면 이어서 Claude Code

지금까지 정리한 걸로 예비 점수표를 엑셀로 만들어줘.
시트는 예비 점수표, 확인 필요, 시범 비교, 일관성 점검, 점수 분포, 제외·미제출, 합계·근거로 나눠서 새 파일로 저장하고, 이름은 서술형_예비채점표로 해줘.
학생 이름은 넣지 말고 번호만 써줘.

원본은 그대로, 새 파일만 늘었다

엑셀이 나오면 바로 이어서 Claude Code

명렬표 인원이 몇 명이고, 점수 있는 답안, 점수 보류, 미제출이 각각 몇 명인지 세어줘. 다 더하면 명렬표랑 같은지도 알려줘.
기준마다 만점을 넘는 점수가 있는지, 합계가 네 기준 점수를 더한 값과 같은지 확인해줘.
점수별 인원을 다 더한 값도 점수 있는 답안 수와 같은지 알려줘. 안 맞으면 어디가 틀렸는지 알려줘.

32 + 5 + 1 = 38 · 만점 넘는 칸 0칸 · 합계 = 네 기준의 합 32/32장 · 점수별 인원 5 + 9 + 9 + 5 + 2 + 2 = 32

숫자가 이상하면 이렇게 다시 부탁할 때 Claude Code

24번 근거가 5점으로 나왔어. 근거는 4점 만점이야. 02_기준표의 채점 기준표를 다시 보고 이 답안의 근거 점수를 다시 매겨서 예비 점수표를 다시 저장해줘.
다른 답안에도 만점을 넘는 칸이 없는지 확인해줘.

합계가 만점을 넘거나 점수가 이상하면 → «어느 칸이 만점을 넘었나»부터 묻는다 · 점수만 고치게 하지 말고 기준표 문구로 이유를 다시 쓰게 한다

마지막으로 한 순서를 남겨 둘 때 Claude Code

오늘 한 순서를 서술형 채점 순서라는 메모로 폴더에 저장해줘.
명렬표와 파일 맞추기, 시범 채점으로 기준 맞추기, 기준마다 점수와 이유 적기, 점수 보류와 확인 표시 규칙, 한 번 더 채점해 비교하기, 엑셀로 저장하기, 숫자 맞춰 보는 순서까지.
다음에 새 답안을 넣고 지난번처럼 해줘라고 하면 그대로 하게.

같은 폴더에서 피드백 글 초안도 만든다

예비 점수표에서 번호마다 학생에게 줄 한 줄 피드백 초안을 써줘. 잘한 점 하나, 고칠 점 하나를 쉬운 말로 써줘.
이름은 쓰지 말고 번호로 써줘. 확인 표시를 단 답안과 점수 보류 답안은 건너뛰어줘.

읽고 적는 시간을 줄이고 되묻는 일을 줄인다

※ «가정»으로 표시한 수치는 설명용이며, 건수는 교육용 가상 폴더 기준입니다 · 출처: 교육혁신연구 34권 1호(2024) 실행연구, Anthropic 교육 보고서 — 절감 금액은 제시되지 않았습니다

AI는 기준대로 읽고 적고, 확정은 교사

• 성적에 들어가는 점수는 교사가 답안을 읽고 확정한다 · 예비 점수를 그대로 넣지 않는다
• 점수를 보류한 5장과 확인 표시 4장은 교사가 직접 읽고 채점한다
• 거의 같은 답안 두 장은 같다는 사실만 알려 준다 · 부정행위 여부와 처리는 교사와 기관이 정한다
• 개인 사정이 적힌 답안은 점수와 별도로 필요한 지원을 사람이 판단한다
• 기준표가 바뀌면 시범 채점부터 다시 · 학생 이의가 있으면 교사가 답안을 다시 읽고 설명한다

우리 학생 답안으로 하기 전에 3가지

결과를 내보내기 전, 5가지 확인

• 답안·기준표 원본은 그대로이고, 예비 점수표는 새 파일이다
• 복사본을 두 번 채점하지 않았고, 작년 구버전 기준표를 쓰지 않았고, 미제출 학생을 찾았다
• 숫자가 맞다 (점수 32 + 보류 5 + 미제출 1 = 38) · 만점 넘는 칸이 없고 합계는 네 기준의 합이다
• 시범 채점으로 기준을 맞췄고, 확인 표시·보류 답안 9장은 교사가 직접 읽었다
• 결과에 학생 이름이 없고, 성적에 넣는 점수는 교사가 확정했다

우리 서술형 답안으로 해 보세요

오늘 쓴 부탁 문장은 영상 설명란과 JJ AI+ 학습 사이트에서 복사할 수 있습니다