왜 이 실험을 시작했는가
의대에는 더러운 비밀이 있습니다: 우리는 모두 정보의 홍수 속에 조난당하고 있으며, 더 이상 제대로 공부하는 방법을 아는 사람이 없습니다. Anki와 손으로 쓴 노트와 같은 전통적인 방법이 여전히 학습 그룹에서 지배적이지만, 모두 AI에 대해 속삭이고 있습니다. ChatGPT는 복잡한 경로를 설명할 수 있습니다. Notion AI는 강의를 요약할 수 있습니다. Quizlet의 AI는 당신의 노트에서 연습 문제를 생성할 수 있습니다. 하지만 문제는—이 도구들이 실제로 효과가 있는지, 아니면 생산성으로 위장한 비싼 미루기에 불과한지 누구도 측정하지 않는다는 것입니다. 저는 1월, 병리학 및 약리학 블록이 시작할 때 AI 도구 사용을 추적하기 시작했습니다. 두 과정 모두 암기 위주의 강의로, 3주마다 고위험 시험이 있기 때문에 완벽한 타이밍이었습니다. 실제로 영향을 측정할 수 있었습니다. 제 기초는 좋지 않았습니다. 가을 학기 동안 전통적인 방법으로 시험 평균이 78%였습니다: Anki 플래시 카드, 2배속으로 강의 녹음, 수기로 쓴 노트. 저는 매일 6-7시간씩 공부했으며, 겨우 물 위로 떠 있는 신세였습니다. 뭔가 변화가 필요했는데, AI가 확실한 답처럼 보였습니다. 그래서 스프레드시트를 만들었습니다. 모든 학습 세션을 기록했습니다: 어떤 도구를 사용했는지, 얼마나 공부했는지, 어떤 자료를 다루었는지, 그리고 제 이해도에 대한 느낌(1-10 척도). 각 시험 후에는 제 점수와 특정 내용을 준비하기 위해 사용한 도구를 기록했습니다. 또한 1주, 2주, 4주 전의 자료에 대한 주간 자가 퀴즈를 시행하여 기억률을 추적했습니다. 목표는 마법의 총알을 찾는 것이 아니었습니다. 실제로 저에게 도움이 되는 도구가 어떤 것인지, 단지 생산적인 느낌만 주는 도구가 어떤 것인지 구별하는 것이었습니다.AI 때문에 거의 떨어질 뻔했던 밤
실험 3주차에 첫 번째 약리학 시험이 있었습니다. 전주까지 레크처 슬라이드에서 연습 문제를 생성하는 AI 도구를 사용했습니다. 지금은 이것을 "QuizBot"이라고 부르겠습니다. QuizBot은 놀라웠습니다. 제 엉망인 강의 노트를 기반으로 즉시 50개의 객관식 질문을 생성했습니다. 인터페이스도 세련되었습니다. 질문이 전문적으로 보였습니다. 200개의 질문을 저녁 시간에 처리할 수 있었기 때문에 효율적으로 공부하고 있다고 느꼈습니다. 저는 그 시험에 자신감 있게 들어갔습니다. 600개의 연습 문제를 넘게 풀었습니다. 저는 이 자료를 완벽하게 알고 있었습니다. 그리고 71점을 받았습니다. 시험 후에 차에서 제 핸드폰 화면을 응시하며 완전히 혼란스러웠습니다. 왜 이렇게 망쳤지? 저는 그 어느 때보다 많이 공부했습니다. 저는 제 학습 그룹에서 누구보다 많은 연습 문제를 풀었습니다. 그날 밤, 제가 답변한 모든 QuizBot 질문을 다시 확인했습니다. 그리고 문제를 찾았습니다: AI가 생성하는 질문이 너무 쉬웠습니다. 시험에서는 "어떤 약물이 ACE를 차단합니까?"라고 물어보는 반면, 실제 시험은 "환자가 새로운 약을 복용한 후 고칼륨혈증과 마른 기침을 호소합니다. 가장 가능성이 높은 메커니즘은 무엇입니까?"라는 질문을 했습니다. QuizBot은 회상을 테스트했습니다. 시험은 응용력을 테스트했습니다. 저는 두 주 동안 답을 인식하는 훈련만 해왔지, 자료에 대해 비판적으로 생각하는 훈련은 하지 않았습니다. AI가 저를 더 멍청하게 만들었습니다. 이것은 저에게 경각심을 불러일으켰습니다. 모든 AI 보조 도구가 도움이 되는 것은 아닙니다. 일부 도구는 잘못된 지표를 최적화합니다—실제로 이해를 개선하지 않고 공부하는 것에 대해 기분이 좋게 만듭니다. 그 이후로 저는 단순히 얼마나 생산적인지 측정하는 것이 아니라 실제 결과를 측정하는 것을 무자비하게 했습니다.데이터: 6개월, 8개 도구, 12개 시험
제가 학기 동안 추적한 내용은 다음과 같습니다:| 도구 | 주요 용도 | 주당 평균 공부 시간 | 평균 시험 점수 | 4주 기억률 | 월 비용 |
|---|---|---|---|---|---|
| ChatGPT Plus | 개념 설명 | 8시간 | 87% | 82% | $20 |
| Notion AI | 노트 요약 | 3시간 | 81% | 71% | $10 |
| QuizBot (익명화) | 연습 문제 | 6시간 | 74% | 65% | $15 |
| Elicit | 연구 논문 | 4시간 | 89% | 88% | $12 |
| Mem.ai | 간격 반복 | 5시간 | 86% | 91% | $15 |
| Otter.ai | 강의 필기 | 2시간 | 79% | 68% | $17 |
| Consensus | 의학 문헌 | 3시간 | 88% | 85% | $9 |
| Anki + AnkiGPT | 플래시 카드 생성 | 7시간 | 90% | 93% | 무료 + $8 |
숫자가 실제로 의미하는 것
그 표를 보면, 답이 간단하다고 생각할 수 있습니다: Anki를 사용하고 QuizBot을 버리면 됩니다. 하지만 더 미묘합니다.최고의 AI 학습 도구는 가장 높은 점수를 얻는 도구가 아닙니다. 그것은 당신이 더 열심히 생각하게 만드는 도구입니다, 공부하기가 더 쉬워 보이는 도구가 아닙니다.ChatGPT Plus는 저에게 가장 많이 사용되는 도구가 되었습니다. 그것은 답을 주기 때문이 아니라, 저에게 혼란을 표현하도록 강요했기 때문입니다. 어떤 개념을 이해하지 못할 때, 저는 단순히 텍스트를 강조 표시하고 요약을 받는 것이 아니라 질문을 작성해야 했습니다: "ACE 억제제가 왜 고칼륨혈증을 일으키는지 이해하지 못하겠습니다. 메커니즘을 단계별로 설명해주실 수 있나요?" 질문을 구성하는 행위—정확히 제가 이해하지 못하는 부분을 식별하는 것이 학습의 절반이었습니다. ChatGPT의 설명이 나머지 절반이었습니다. 하지만 이 도구는 제가 능동적으로 사용했기 때문에만 효과를 발휘했습니다. Elicit과 Consensus도 비슷한 이유로 높은 점수를 받았습니다. 제가 레닌-안지오텐신-알도스테론 시스템과 같은 복잡한 주제를 이해해야 할 때, 저는 이 도구를 사용하여 실제 연구 논문과 임상 연구를 빠르게 찾아냈습니다. 그런 다음 ChatGPT를 사용하여 논문의 내용을 이해했습니다. 이 두 단계 프로세스—1차 출처를 찾고, 그 다음 그들을 해석하는 데 도움을 받는 것—은 단순히 요약을 읽는 것보다 훨씬 더 깊이 있는 이해로 이어졌습니다.
제 성과에 악영향을 준 도구들은 모두 공통점이 있었습니다: 그들은 제가 생각하는 어려운 작업을 회피하게 했습니다. 그들은 제가 수동적으로 만들면서 공부에 대해 생산적이라고 느끼게 했습니다.Notion AI의 요약 기능이 가장 나쁜 범죄자였습니다. 저는 제 강의 노트를 여기에 넣고 깔끔한 요약을 얻으면 공부를 한 것처럼 기분이 들었습니다. 하지만 저는 자료와 전혀 상호 작용하지 않았습니다. 저는 AI가 저를 대신해 저와 상호 작용하는 것을 지켜보고 있었습니다. 내 두뇌는 어떤 것이 중요한지, 어떤 것이 무엇과 연결되는지, 또는 내가 이해하지 못하는 것이 무엇인지 결정하는 작업을 하지 않아도 되었습니다. Otter.ai도 같은 문제를 가지고 있었습니다. 모든 강의의 완벽한 필기를 가지는 것은 놀랍게 들리지만, 그것은 능동적으로 듣고 필기할 필요성을 제거했습니다. 필기는 당신이 실시간으로 정보를 처리하게 하고, 무엇이 중요한지 결정하게 하며, 개념을 자신의 말로 바꾸게 만듭니다. Otter는 그 인지 작업을 제거했으며, 저의 기억률이 나빠졌습니다. 여기서 교훈은 "요약 도구를 피하라"가 아닙니다. "학습의 인지적 작업을 건너뛰게 하는 도구를 피하라"입니다. 일부 AI 도구는 인지 증폭기입니다—당신의 사고를 더 강력하게 만듭니다. 다른 도구는 인지 대체물입니다—당신을 대신해 생각합니다. 당신은 첫 번째 종류를 원하고, 두 번째 종류는 원하지 않습니다.
AI가 학습을 빠르게 만든다는 신화
모든 사람은 AI 학습 도구가 시간을 절약한다고 생각합니다. 그것이 전체 아이디어 아닙니까? 더 스마트하게 공부하고, 더 열심히 공부하지 마세요. 더 적은 시간에 더 많은 것을 끝내세요. 그건 헛소리입니다. 실제로 제 성과를 개선한 도구들은 저를 더 오랫동안 공부하게 만들었습니다. Anki + AnkiGPT를 사용하면서 플래시 카드에 주당 7시간을 소비했습니다. ChatGPT 세션은 복잡한 주제를 다루면서 자주 90분이 넘게 걸렸습니다. Elicit을 사용하여 연구 논문을 찾고 읽는 데는 제 공부 시간에 몇 시간을 더했습니다. 하지만 : 그 시간은 생산적이었습니다. 저는 단순히 복습하는 것이 아니라 배우고 있었습니다. 저는 사실을 암기하는 것이 아니라 이해를 쌓고 있었습니다. QuizBot과 비교해 보시기 바랍니다. 저는 200개의 질문을 2시간 만에 푸는 것이 가능했고, 정말 경제적이었다고 느꼈습니다. 저는 빠르게 움직이며, 체크박스를 확인하고, 진행 막대를 채우고 있었습니다. 하지만 저는 배우고 있지 않았습니다. 저는 단순히 쉬운 질문에서 패턴을 인식하는 훈련만 하고 있었습니다.최고의 AI 학습 도구는 공부를 더 빠르게 만들지 않습니다. 그들은 당신이 자료에 더 깊이 참여하도록 강요함으로써 공부를 더 효과적으로 만듭니다.이는 대부분의 학생들이 듣고 싶어하지 않는 이야기입니다. 우린 모두 해킹 방법, 지름길을 찾고 있으며, 힘들지 않고 A를 얻는 방법을 찾고 있습니다. 하지만 학습은 그런 방식으로 작동하지 않습니다. 당신은 이해를 AI에게 아웃소싱할 수 없습니다. 하지만 당신은 AI를 사용하여 학습 시간을 더욱 집중하고 도전적으로 만들 수 있습니다. ChatGPT는 당신이 스스로 생각해낸 것보다 더 어려운 질문을 생성할 수 있습니다. Elicit은 당신이 스스로 발견하지 못할 논문을 찾아낼 수 있습니다. Anki의 알고리즘은 당신이 수동으로 할 수 있는 것보다 더 잘 복습 일정을 최적화할 수 있습니다. 하지만 이러한 도구들은 모두 인지적 작업을 해야 합니다. 그것들은 지름길이 아닙니다. 그것들은 파워 도구입니다. 그리고 모든 파워 도구와 마찬가지로, 실제 작업을 기꺼이 수행할 준비가 되어 있을 때만 유용합니다.