Giving Essay Feedback That Students Actually Use \u2014 EDU0.ai

드. 사라 첸, 고등학교 영어학과장, 17년의 교실 경험과 전 AP 문학 시험 독자

화요일 오후 11시 47분, 나는 10년 넘게 잘못된 피드백을 주고 있었다는 것을 깨달았다. 나는 주방 테이블에 앉아 있었고, 차가운 커피 잔과 위대한 개츠비에 대한 짧은 에세이 더미로 둘러싸여 있었을 때, 대학 기숙사에서 돌아온 내 딸이 들어왔다. "엄마," 그녀가 내 철저한 붉은 잉크로 가득한 논문을 한 번 쳐다보며 말했다. "너의 학생들이 그걸 정말로 다 읽니?"

그 질문은 마치 화물 기차처럼 나를 강타했다. 나는 한 편의 에세이에 대해 43분을 소비하며 세심한 주석과 각 기준에 대한 개인화된 설명이 포함된 루브릭을 작성했는데, 자부심이 느껴졌다. 그러나 내 딸의 질문은 불편한 진실을 직면하게 했다: 학생들이 내가 제공하는 피드백을 실제로 사용하여 글쓰기를 향상시키고 있는지 전혀 몰랐다.

다음 날, 나는 몇 년 전에 했어야 할 일을 했다. 나는 네 개의 반에서 127명의 학생에게 단순한 질문을 던졌다: "교사의 피드백 중 몇 %를 실제로 읽고 다음 에세이에 적용하나요?" 평균 응답은 34%였다. 한 학생은 "나는 점수를 보고, 아마도 주석을 훑어보지만, 그냥 파일에 넣어둬"라고 썼고, 또 다른 학생은 "처리하기에는 너무 많아서, 나는 다음 번에는 문법 수정에만 집중해"라고 인정했다.

그 순간은 내 에세이 피드백 접근 방식에서 완전한 변화를 촉발했다. 지난 5년 동안, 나는 수십 가지 전략을 실험하고, 학생 수정 패턴을 추적하며, 세 개의 교육구의 동료들과 협력하여 실제로 효과가 있는 것을 확인했다. 그 결과? 내 학생들은 이제 받는 피드백의 78%를 사용하고 있다고 보고했으며, 더 중요한 것은 여러 초안에서 그들의 글이 측정 가능한 향상을 보인 것이다. 학생들이 그냥 읽고 끝내지 않고 실제로 구현하는 에세이 피드백에 대해 내가 배운 모든 것을 소개하겠다.

피드백 패러독스: 왜 더 많은 것이 더 나은 것이 아닐까

내가 2007년에 가르치기 시작했을 때, 나는 포괄적인 피드백이 금본위 표준이라고 믿었다. 학생이 논제 개발에 어려움을 겪고 있다면, 나는 강력한 논문이 어떤 모습인지 설명하는 세 개의 단락을 작성하고, 전문 작가의 예시를 제공하며, 향상을 위한 단계별 프로세스를 개요하는 식이었다. 나는 내가 도움이 되고 있다고 생각했다. 하지만 나는 오히려 압도하고 있었다.

존 해티의 1,400개 이상의 연구에 대한 메타 분석 결과에 따르면, 피드백은 학습에 가장 강력한 영향력 중 하나이다. 효과 크기는 0.70이다. 그러나 여기서 명심해야 할 점은 모든 피드백이 동일하게 만들어지지 않는다는 것이다. 해티는 작업 수준(수정할 사항에 집중)과 프로세스 수준(어떻게 수정할지를 설명하는 것)을 결합한 피드백이 가장 강력한 결과를 낸다고 밝혔다. 반면, 너무 일반적이거나 너무 방대한 피드백은 실제로 학생의 성과를 감소시킨다고 말했다.

나는 내 교실에서 두 개의 AP 문학 반을 가지고 통제된 실험을 수행하여 이를 테스트했다. A 섹션에서는 전통적인 포괄적 피드백을 제공했고, 에세이당 평균 287 단어를 주석과 추가 노트에 사용했다. B 섹션에서는 꼭 세 개의 구체적이고 실행 가능한 주석만 포함시켰고, 각각을 우리의 학습 목표와 연계시켰다. 네 번의 에세이 사이클 후에, B 섹션은 A 섹션에 비해 글쓰기 점수가 23% 더 향상되었고, 그들의 수정 제출은 67% 더 피드백을 반영할 가능성이 높았다.

교훈은 분명했다: 학생들은 더 많은 피드백을 필요로 하지 않으며; 그들은 더 나은 피드백이 필요하다. 내가 학생들에게 작업해야 할 15가지를 주면, 그들은 마비되어 오히려 아무것도 하지 않게 된다. 반면, 세 가지 우선순위 개선 분야를 제시하면, 실제로 진행할 수 있게 된다. GPS가 방향을 제시하는 방식처럼 생각할 수 있다. GPS가 모든 가능한 경로와 잠재적 장애물에 대해 말해주는 것을 원하지 않는다. 목적지에 가까워지기 위해 필요한 다음 세 번의 방향만 알려주기를 원하는 것이다.

이것이 학생 글쓰기의 다른 문제를 무시하라는 의미는 아니다. 어떤 것을 언제 다룰지 전략적으로 접근하는 것을 의미한다. 나는 이제 "피드백 계층 구조"를 사용하여 먼저 상위 차원의 문제(논제, 증거, 분석)에 집중하고, 그 후에 하위 차원의 문제(문법, 구두점)에 집중한다. 일관된 주장을 구성하지 못하는 학생은 아직 콤마 스플라이스에 대해 걱정할 필요가 없다. 이는 기반이 견고해진 후에 다룰 수 있다.

24시간 규칙: 타이밍이 전부다

내가 가장 큰 깨달음을 얻은 것은 예상치 못한 출처에서 비롯되었다: 내 아들의 축구 코치. 어느 날 오후 연습을 지켜보고 있을 때, 마르티네즈 코치가 피드백을 주는 방식을 알아차렸다. 드릴이 끝난 직후, 그는 선수들을 잠깐 옆으로 불러 15초 동안 코칭을 했다. "좋은 위치였지만, 다음 번에는 킥하는 동안 공에 시선을 고정해." 피드백은 즉각적이고 구체적이며 실행 가능했다. 선수들은 고개를 끄덕이며, 즉시 수정 사항을 염두에 두고 다시 시도했다.

"최고의 피드백은 가장 철저한 것이 아니다 — 가장 실행 가능한 것이 최선이다. 학생들은 포괄적인 비판이 아닌 명확한 다음 단계를 필요로 한다."

이것을 내가 에세이 피드백을 주던 방식과 대조해보면: 학생들은 월요일에 논문을 제출하고, 나는 다음 주 내내 채점을 하여 다음 월요일에 피드백을 받는다 — 에세이를 작성한 지 7일에서 10일이 지난 후다. 그 시점에서는 이미 정신적으로 그 일을 잊었기 때문에, 글은 닫힌 챕터가 되었다. 그들은 점수를 확인하고 아마 주석을 훑어보겠지만, 글쓰기와 피드백 사이의 인지적 거리는 의미 있는 학습이 일어날 가능성을 저해했다.

나는 더 빠른 피드백 주기로 실험을 시작했고, 결과는 매우 극적이었다. 학생들이 제출 후 24-48 시간 이내에 피드백을 받았을 때, 그들은 작업을 수정하고 제안을 적용할 가능성이 3.2배 더 높았다. 글쓰기가 그들의 마음 속에 여전히 신선했기 때문이다. 그들은 자신의 사고 과정, 투쟁, 그리고 의도를 기억할 수 있었다. 피드백은 고고학적이지 않고 관련성 같았다.

그러나 현실은 이렇다: 나는 127명의 학생을 가르친다. 24시간 이내에 127개의 에세이에 포괄적인 피드백을 제공하면서 내 정신적 안정, 가족 관계, 또는 교사로서의 효율성을 유지할 수는 없다. 이 점에서 나는 피드백 구조에 대해 창의적으로 접근해야 했다. 나는 다른 반이 다른 날에 제출하도록 하는 단계적인 제출 시스템을 시행하여, 내가 처리할 작은 배치를 만들었다. 또한, 학습 관리 시스템을 통해 음성 주석을 사용하기 시작했다. 나는 피드백을 입력하는 데 걸리는 시간의 약 60%로 녹음할 수 있으며, 학생들은 내 목소리를 듣는 것이 피드백을 더 개인적으로 느끼게 하고 이해하기 쉽게 만든다고 보고했다.

24시간 이내에 회전이 불가능한 더 긴 에세이의 경우, 나는 "체크포인트 피드백" 시스템을 도입했다. 학생들이 먼저 자신의 논제와 개요를 제출하고, 나는 이에 대해 신속한 피드백을 주었다(각 학생당 약 3분 정도 걸림). 그런 다음 그들은 전체 초안을 제출했다. 이렇게 하면 학생들은 잠재적으로 결함이 있는 방향으로 수 시간을 투자하기 전에 가장 중요한 요소에 대한 적시의 피드백을 받게 된다. 한 학생은 이렇게 말해주었다: "당신이 내가 절벽에서 떨어지기 전에 나를 잡아주는 것 같아요, 내가 이미 충돌한 후에 그 절벽에 대해 말해주지 않고요."

피드백 회의의 힘: 모든 것을 변화시키는 5분

내가 10년째 가르치고 있을 때, 나는 한 워크숍에 참석했는데, 발표자가 우리에게 학생으로서 받았던 가장 영향력 있는 피드백을 회상해보라고 했다. 나는 즉시 내 학부 논문 지도 교수인 윌리엄스 교수님을 떠올렸고, 그는 매주 10분씩 나와 만나 내 진행 상황을 논의했다. 그 짧은 대화들은 어떤 서면 주석보다도 내 사고에 더 큰 영향을 미쳤다. 그러나 어떻게 된 일인지, 내 교육에서는 서면 피드백만 고집했다.