학습자는 생성형 AI를 사용해 과제를 더 빨리 완성할 수 있지만, 그 속도가 장기 역량으로 이어지는지는 자신이 어떤 인지적 작업을 남겨 두었는지에 달려 있다. 따라서 학습자는 AI를 사고와 판단의 대체물이 아니라 자기 역량을 증폭하는 augmentation 도구로 배치해야 한다.
이 문서의 핵심 흐름은 다음과 같다.
먼저 스스로 만들고, 판단만은 직접 하며, 마지막에는 AI 없이 다시 해본다.
1. 이 문서가 구분하는 것: 성과와 역량
AI 사용의 효과를 논의하려면 두 결과를 분리해야 한다.
- 단기 성과(task performance): 지금 과제를 얼마나 빠르고 매끄럽게 완성했는가.
- 장기 역량(skill formation): 도구 없이 원리를 설명하고, 새로운 문제에 적용하고, 오류를 수정할 수 있는가.
학습자가 AI를 이용해 첫 번째 결과를 높일 수는 있다. 그러나 두 번째 결과가 같은 속도로 따라오는지는 별도로 확인해야 한다. 두 결과가 갈리는 지점은 AI의 성능이 아니라, 학습자가 어떤 인지적 작업을 수행했는가다. 더 강하게 말하면 학습자가 AI에 작업을 넘겨도 단기 성과가 높아지지 않을 수 있고, 성과가 높아도 학습이 약해질 수 있다.
따라서 학습의 질문은 “AI가 결과물을 더 좋게 만들었는가?”에서 끝나면 안 된다.
AI가 사라진 뒤에도 학습자가 설명·판단·적용할 수 있는가?
2. 학습을 설명하는 이론: 누가 작업했고, 누가 자기 상태를 판단하는가
이 장의 이론들은 서로 다른 목록이 아니라 두 질문에 답한다. 첫째, 학습자가 무엇을 하기로 했고, 실제로 스스로 만들고 꺼내고 어려움을 통과하고 설명했는가. 둘째, 학습자가 자신의 상태를 정확히 판단하는가. 성취목표·생성 효과·인출 연습·바람직한 어려움·동료 튜터링은 첫 질문을, 인지적 외주화와 유창성 착각은 둘째 질문을 다룬다. 형성평가는 두 질문의 증거를 다음 행동으로 연결하는 배경 이론이며, 6장에서 평가 설계의 관점으로 다룬다.
2.1 성취목표이론: 어떤 작업을 성공으로 볼 것인가
성취목표이론은 학습자가 역량을 어떻게 정의하고 평가하는지를 설명한다(Dweck & Leggett, 1988).
- 숙련목표(mastery goal): 과제를 이해하고 역량을 발전시키는 데 초점을 둔다.
- 성과목표(performance goal): 자신의 능력을 보여 주거나 타인보다 좋은 결과를 내는 데 초점을 둔다.
후속 연구는 목표의 방향을 접근(approach)과 회피(avoidance)로 나누고, 성공의 기준을 과제(task), 자기(self), 타인(other)으로 구분했다. Elliot, Murayama & Pekrun(2011)의 3×2 모델은 바로 이 기준 × 방향 구조를 다룬다.
성과목표가 항상 나쁜 것은 아니다. 시험, 납품, 합격처럼 외부 성과가 필요한 상황에서는 성과-접근 목표가 기능할 수 있다. 문제는 “유능해 보이는 결과물”이 “실제로 이해한 결과물”을 대신할 때 생긴다.
AI 시대의 두 목표는 다음처럼 구분할 수 있다.
- 성과목표: “AI를 활용해 좋은 결과물을 제출한다.”
- 숙련목표: “AI가 만든 결과물을 설명하고, 검증하고, 변형할 수 있다.”
Noordzij, Giel & van Mierlo(2021)의 실험 메타분석은 유도된 숙련-접근 목표가 성과-접근 목표보다 과제 수행에 유리할 수 있음을 보고했다(d = 0.28). 이 이점은 특히 과제 기준으로 목표를 제시할 때 나타났고, 자기 기준에서는 뚜렷하지 않았다. 다만 효과는 과제와 맥락에 따라 달라진다.
프로토콜 연결: 이 이론은 5장 0단계에서 “이번 과제에 숙련목표가 걸려 있는가, 결과 제출만 필요한가”를 판단하게 한다. Bastani 외(2025)의 GPT Tutor 조건은 답 대신 힌트를 제공해 학습자의 작업을 남겨 둔 사례로, 숙련목표와 인터페이스 설계를 연결한다.
2.2 생성 효과: 먼저 스스로 만들어 보기
생성 효과(generation effect)는 정보를 단순히 읽은 경우보다 학습자가 직접 답, 설명, 단서 또는 예시를 만들어 본 경우 기억이 더 잘 되는 현상이다. Bertsch 외(2007)는 86개 연구의 445개 효과크기를 종합해 생성 조건의 평균 이점(d = 0.40)을 보고했다.
AI가 첫 초안과 답을 먼저 제공하면 학습자는 읽고 승인하는 위치에 머물 수 있다. 반대로 AI를 열기 전에 자신의 가설과 초안을 만들면, AI의 제안이 기존 사고와 비교할 수 있는 자료가 된다.
프로토콜 연결: 5장 1단계 자기 생성은 작업을 먼저 점유하는 단계다. Lira와 Bauer는 학습자가 직접 생성하지 않아도 산출물 품질이 좋아질 수 있음을 보여 주므로, 생성 효과는 산출물 품질이 아니라 학습자가 수행한 작업과 무보조 전이를 설명하는 원리로 사용한다. 배경지식이 거의 없는 초보자에게는 짧은 설명과 예시가 먼저 필요할 수 있다.
2.3 인출 연습과 시험 효과: 알고 있다고 느끼는 것과 꺼내는 것은 다르다
인출 연습(retrieval practice)은 자료를 다시 보는 대신 기억에서 내용을 꺼내는 연습이다. Roediger & Karpicke(2006)는 반복 학습보다 반복 시험이 지연된 기억 유지에 더 유리할 수 있음을 보였다. 즉시 시험에서는 재학습이 더 좋아 보일 수 있지만, 며칠 뒤 평가에서는 인출 연습의 이점이 나타났다.
AI 학습에서는 다음이 인출 연습에 해당한다.
- AI와 대화하기 전에 자신의 답을 먼저 적기
- AI 사용 후 화면을 닫고 핵심 개념을 설명하기
- AI가 작성한 코드를 보지 않고 핵심 로직을 다시 구현하기
- 다음 날 같은 원리를 새로운 문제에 적용하기
프로토콜 연결: 5장 1단계와 4단계, 5단계에서 AI 사용 직후의 유창한 이해감보다 지연된 무보조 회상을 우선한다. Bastani 외(2025)의 AI 제거 후 시험은 이 구분을 적용한 실증 사례다.
2.4 바람직한 어려움: 쉬운 수행이 항상 좋은 학습은 아니다
바람직한 어려움(desirable difficulties)은 학습 중에는 수행을 어렵게 만들지만 장기 유지와 전이에 도움이 될 수 있는 조건을 말한다(Bjork & Bjork, 2011). 간격 학습, 인출, 교차 연습 등이 대표적인 예다.
AI는 어려운 부분을 빠르게 제거한다. 이것은 작업 효율에는 좋지만, 학습에 필요한 생성·회상·오류 수정의 기회를 줄일 수 있다. 따라서 모든 어려움을 제거하기보다, 학습 목표에 필요한 어려움은 남겨야 한다.
프로토콜 연결: 5장 4단계의 무보조 전이와 5단계의 지연 확인에서 AI의 도움을 받은 과제와 AI 없이 확인하는 과제를 구분한다. Kosmyna 외(2025)의 조건 전환은 먼저 수행한 작업이 이후 AI 사용의 관여와 관련될 가능성을 보여 주지만, EEG를 학습 성과로 해석하지는 않는다.
2.5 인지적 외주화와 유창성 착각
인지적 외주화(cognitive offloading)는 기억·계산·계획 같은 처리를 외부 도구에 맡겨 인지 부담을 줄이는 것이다. Risko & Gilbert(2016)은 외주화가 유용한 적응 전략인 동시에, 무엇을 외부에 맡겼는지와 그 결과를 내부적으로 얼마나 이해하는지가 중요하다고 설명한다.
AI의 유창한 답변은 처리 부담을 줄이고 결과물을 빠르게 만든다. 그러나 읽기 쉽고 설명이 매끄럽다는 느낌이 실제 인출·적용 능력으로 이어진다는 보장은 없다. 이것이 유창성 착각(illusion of fluency)과 메타인지적 판단 오류의 위험이다(Koriat & Ma'ayan, 2005).
Shen & Tamkin(2026)은 AI 집단이 과제를 더 쉽게 느꼈지만 통제 집단이 자기보고한 학습은 더 높았다고 보고했다. 이는 “쉬웠다”는 경험과 “배웠다”는 판단이 분리될 수 있음을 보여 주는 직접적인 사례다.
프로토콜 연결: 5장 2단계의 질문·검증, 4단계의 무보조 전이, 5단계의 지연 확인에서 자기보고 난이도 대신 실제 설명·회상·전이 결과를 본다.
2.6 동료 튜터링: 배우고 가르치며 역할을 교대하기
동료 튜터링(peer tutoring)은 학습자들이 동료에게 배우고 동료를 가르치며 튜티와 튜터의 역할을 교대하는 상호적 학습 구조다. 튜티는 설명을 듣고 질문하며 오해를 드러내고, 튜터는 설명·응답·재구성을 하면서 자기 이해의 빈틈을 발견한다.
Roscoe & Chi(2007)는 튜터의 학습이 단순한 지식 전달보다 설명을 정교화하고 질문에 응답하며 기존 지식을 재구성하는 과정에서 나타난다고 분석했다. Shahriar & Matsuda(2023)는 teachable agent가 지식 전달식 응답을 보일 때 후속 질문을 제공하는 Constructive Tutee Inquiry를 제안했고, 처치 집단이 더 나은 성과를 보였으며 시간이 지나면서 후속 질문 없이도 knowledge-building에 참여하게 됐다고 보고했다.
실제 사람 동료와 상호작용할 수 있다면 서로 배우고 역할을 교대하는 활동을 우선한다. 동시에 AI를 연습용 튜티, 질문 생성기, 설명 피드백 도구, 실제 동료 토론을 준비하는 보조 동료로 만들 수 있다. AI의 질문과 피드백은 학습자가 검증한다.
프로토콜 연결: 5장 2단계에서 동료 또는 AI 튜티에게 설명하고 질문에 답한 뒤, 4단계에서 상대의 도움 없이 다시 설명한다. Constructive Tutee Inquiry의 후속 질문 없이도 knowledge-building에 참여하게 된 결과는 이 무보조 전이와 대응한다. 실제 동료를 쓸 때는 역할을 교대하고, AI를 쓸 때는 AI를 튜티 역할에 한정하되 핵심 설명과 최종 판단은 학습자가 담당한다.
3. AI 실증 연구: 어떤 사용이 어떤 결과를 만드는가
이 장은 두 렌즈로 읽는다. 첫째, 사람 중심 렌즈로 각 연구에서 학습자가 얼마나 인지적 작업을 했고 무엇을 외주화했는지를 본다. 둘째, 측정 대상 렌즈로 결과가 무보조 역량인지, 산출물 품질인지, 인지 관여의 대리 지표인지 구분한다. 3.1과 3.2는 주로 AI 제거 후 역량을, 3.3~3.5는 주로 인지 관여 또는 산출물 품질을 측정했다.
Bastani에서는 GPT Base가 작업을 대신하게 해 무보조 시험이 하락했고 GPT Tutor는 학습자의 작업을 남겨 손실을 완화했다. Shen & Tamkin에서는 완전 위임이 학습 손실과 연결됐고, 인지적 관여를 동반한 질적 패턴은 학습을 보존할 가능성을 보였다. Kosmyna에서는 먼저 스스로 쓴 집단이 이후 AI 사용에서 관여 지표가 상승했지만, 먼저 AI를 쓴 집단은 나중에 혼자 써도 낮은 관여 지표가 지속됐다. 이 세 연구는 학습자가 수행한 작업과 결과의 관계를 직접 다룬다.
반면 Lira와 Bauer에서는 학습자가 거의 작업하지 않아도 산출물은 좋아졌지만, 그 자체로 학습을 측정한 것은 아니다. 이 두 연구는 예시 노출이 특정 과제의 산출물을 개선할 수 있다는 경계 조건이면서, 산출물 품질만으로 학습을 추론할 수 없다는 증거다.
3.1 수학: 무제한 도움은 연습 성과를 높였지만 학습을 약화시킬 수 있다
Bastani 외(2025)는 고등학생 약 1,000명을 대상으로 GPT-4 기반 튜터를 비교했다. 일반적인 ChatGPT와 유사한 GPT Base, 학습을 보호하도록 설계된 GPT Tutor, 통제 조건이 포함됐다.
AI가 있는 동안에는 연습 성과가 올랐다. 그러나 AI를 제거한 시험에서는 GPT Base 집단이 통제 집단보다 낮은 성과를 보였고, 연구 초록은 그 차이를 17% 감소로 보고한다. GPT Tutor에서는 부정적 효과가 크게 완화됐다.
이 연구는 AI가 나쁘다는 근거가 아니다. 답을 대신 주는 인터페이스와 힌트·사고를 유도하는 인터페이스가 학습 결과를 다르게 만든다는 근거다. 연구는 고등학교 수학 맥락에 한정되며, 2025년 정정 이력도 함께 확인해야 한다.
출처: PNAS 원문, 정정 정보
3.2 코딩: AI 사용은 평균 효율도 자동으로 높이지 않았고, 위임형 사용은 학습을 약화시켰다
Shen & Tamkin(2026)은 주로 주니어인 개발자 52명을 대상으로, 처음 사용하는 Python 비동기 라이브러리를 학습할 때 AI 도움의 효과를 무작위 실험으로 조사했다.
원 논문의 핵심은 단순히 “AI가 편리했지만 학습이 줄었다”가 아니다.
- AI 사용은 개념 이해, 코드 읽기, 디버깅을 저해했다.
- 평균적으로 유의미한 효율 향상도 나타나지 않았다.
- AI 없이 수행한 집단과 AI 집단의 속도 차이는 질의를 작성하고 응답을 읽고 이해하는 데 쓴 시간으로 상쇄될 수 있었다.
- 과제를 완전히 위임한 참가자만 일부 생산성 이득을 보였지만, 그 대가로 해당 라이브러리의 학습을 잃었다.
- AI 집단은 과제를 더 쉽게 느꼈지만, 통제 집단은 자기보고 학습을 더 높게 보고했다.
따라서 이 연구는 “단기 성과는 오르지만 장기 역량은 별개”라는 주장보다 강한 근거다.
AI 사용이 단기 성과를 자동으로 높인다는 보장조차 없다.
이 결과는 인지적 외주화와 유창성 착각에 연결된다. 작업은 쉬워졌다고 느끼지만, 실제로 무엇을 배웠는지에 대한 판단은 부정확할 수 있다. 다만 표본이 작고 하나의 라이브러리와 주로 주니어 개발자에 한정되며, 연구는 arXiv 프리프린트다.
출처: How AI Impacts Skill Formation (v2, 2026-02-01)
3.3 글쓰기: 먼저 쓴 뒤 AI를 사용한 조건에서 인지 관여가 높아졌다
Kosmyna 외(2025)의 MIT 연구는 GPT-4o, 검색엔진, 외부 도구 없는 글쓰기를 비교하고, 네 번째 세션에서 조건을 일부 바꾸었다. 54명이 첫 세 세션에 참여했고 네 번째 세션 완료자는 18명이었다.
Brain-only 집단은 더 강하고 넓은 EEG 연결성을 보였고, LLM 집단은 자기 글을 기억하고 인용하는 데 어려움을 보였다. 네 번째 세션에서 기존 Brain-only 집단이 LLM을 사용했을 때는 인지 연결성과 기억 회상이 증가했지만, 기존 LLM 집단이 AI 없이 작성할 때는 낮은 관여 지표가 지속됐다. 이 비대칭은 순서 효과의 가능성을 시사하지만, 어느 방향이 일반적으로 우월하다고 확정하지는 않는다.
이 연구의 EEG는 학습 그 자체가 아니라 인지 관여의 대리 지표다. 표본이 작고 동료심사 전 프리프린트이므로, “AI를 나중에 쓰면 글 점수가 더 좋아진다”가 아니라 먼저 자기 생각을 만든 뒤 AI를 도입하는 순서가 인지적 관여를 높일 가능성으로 제한해 해석한다.
출처: arXiv 원문, MIT 연구 페이지
3.4 글쓰기의 경계 조건: 좋은 예시 노출만으로도 산출물이 향상될 수 있다
Lira 외(2025)는 참가자들이 AI와 함께 커버레터 작성 연습을 한 뒤 하루 후 글쓰기 평가를 받는 사전등록 실험을 수행했다. AI 연습 집단은 AI 없이 연습한 집단보다 더 큰 산출물 품질 향상을 보였다. 이 연구는 무보조 역량이나 장기 전이를 직접 측정한 연구가 아니다.
두 번째 실험에서 AI와 직접 상호작용한 집단은 AI가 만든 커버레터를 보기만 한 집단보다 낫지 않았다. 따라서 관찰된 효과가 대화·질문이라는 상호작용 자체보다 고품질 예시 노출에서 왔을 가능성을 배제할 수 없다.
이 결과는 4장 조건부 모델에 중요한 경계 조건을 준다. 예시 노출은 독립된 학습 원리라기보다, 학습자가 수행해야 할 작업이 줄어도 산출물이 좋아질 수 있음을 보여 주는 사례다.
- 예시의 구조와 표현을 배우는 과제에서는 예시 노출만으로도 충분할 수 있다.
- 개념적 추론, 디버깅, 전이처럼 자기 판단이 핵심인 과제에서는 예시만 보는 것으로 부족할 수 있다.
연구는 커버레터라는 특정 과제에 관한 것이며, 장기 전이와 다른 글쓰기 과제에 대한 일반화에는 한계가 있다.
출처: Harvard Kennedy School 요약, arXiv 원문
3.5 학술 글쓰기: 예시 노출 경로와 비AI → AI → 비AI 순서의 가능성
Bauer 외(2026)는 베를린 소재 1학년 국제 패션디자인 전공생 21명(25명 모집, 4명 제외)을 대상으로, 2023년 5월 실험 인터페이스에 GPT-3.5 API를 내장해 학술 논문 서론을 다음 순서로 작성하게 했다.
비AI 글쓰기 → 내장형 GPT-3.5 사용 → 다시 비AI 글쓰기
AI 사용 조건에서 글의 품질이 높아졌고 이후 비AI 글쓰기에서도 첫 번째보다 품질이 높았다. 최종 텍스트의 평균 71%가 ChatGPT 출력에서 직접 복사되었고 중앙값은 95%였지만, 후속 비AI 글쓰기의 품질은 향상됐다. 저자들은 ChatGPT 출력이 과제에 맞춤화된 worked example(작업 예시)처럼 기능했을 가능성을 해석으로 제시한다. 또한 AI 사용 후 텍스트 분포의 이상치가 줄고 중앙으로 몰리는 균질화가 관찰되었으며, 약한 학생은 이득을 얻고 상위권 학생은 방해받았을 가능성도 제시됐다.
소유감은 ChatGPT 사용 중 유의하게 낮아졌지만(d = −0.52, p = .014), 이후 비AI 글쓰기에서 첫 번째보다 높아진 결과는 유의하지 않은 상승 경향이었다(d = 0.30, p = .095). 따라서 후속 소유감 상승을 확정적 효과로 쓰지 않는다.
이 연구는 AI 사용 후의 비AI 수행을 직접 다룬다는 장점이 있다. 그러나 대조군이 없는 ABA 내참가자 설계라 자연스러운 연습 효과와 AI 효과를 완전히 분리할 수 없다. 데이터 수집은 2023년 5월에 이루어졌고, 다중비교 보정이 적용되지 않아 저자들도 결과를 잠정적으로 해석한다. 또한 2026년의 최신 모델과 GPT-3.5 내장 인터페이스는 능력과 사용 경험이 다르므로, 현재의 ChatGPT·GPT 계열에 그대로 일반화하기 어렵다.
Lira와 Bauer는 모두 상호작용 자체보다 고품질·맞춤형 예시 노출이 산출물 개선의 일부를 설명할 수 있다는 공통 경계 조건을 제공한다. 두 연구는 후속 무보조 역량을 충분히 측정하지 않았으므로, 예시만으로 전이와 판단 능력까지 확보됐다고 해석하지 않는다.
출처: Computers and Education: Open
4. 통합 모델: 남겨야 할 작업을 숙련도와 과제로 결정하기
앞 장의 결과를 설계 규칙으로 바꾸면 두 축이 나온다. 숙련도는 학습자가 AI 출력을 판단할 수 있는가의 문제이고, 과제 유형은 이번 과제에서 생성·판단·무보조 적용을 실제로 해야 하는가의 문제다. 초보자는 AI 결과를 평가할 내부 스키마가 약하므로 더 많은 작업을 남겨야 하고, 숙련자는 반복 작업을 더 많이 외주화할 수 있다. 다만 새 도메인을 배우는 순간에는 숙련자도 학습형 과제로 돌아간다.
4.1 1차 분기: 나는 이 영역의 초보자인가
Bastani 연구는 고등학생, Shen & Tamkin 연구는 주로 주니어 개발자를 대상으로 했다. 이들은 AI 출력의 품질을 평가할 스키마가 충분하지 않을 수 있다. 다만 Bauer와 Lira의 결과가 보여 주듯 초보자에게 AI가 산출물 품질의 이득을 줄 수도 있다. 여기서 모순은 없다. Bastani와 Shen & Tamkin은 AI를 제거한 뒤의 학습·무보조 역량을 측정했고, Bauer와 Lira는 주로 AI 사용 중 또는 직후의 산출물 품질을 측정했다. 초보자에게서 결과물은 좋아져도 내부 역량이 같은 정도로 형성된다고 볼 수는 없다.
반면 해당 영역의 숙련자는 AI 출력을 빠르게 검토하고, 오류를 찾아내고, 자신의 기존 지식과 대조할 가능성이 크다. 그렇다고 숙련자에게 위험이 없는 것은 아니다. 익숙한 과제의 자동화가 새로운 영역의 학습을 방해할 수 있기 때문이다.
프로토콜을 적용하기 전 다음을 묻는다.
- 내가 이 영역의 핵심 개념을 AI 없이 설명할 수 있는가?
- 좋은 답과 그럴듯하지만 틀린 답을 구분할 수 있는가?
- 실패 원인을 스스로 가설화할 수 있는가?
하나라도 자신 없으면 초보자 티어를 적용한다.
4.2 2차 분기: 이 과제는 어떤 작업을 요구하는가
- 학습형: 개념 이해, 디버깅·추론, 새로운 기술 습득이 목적이다. 자기 생성, 질문, 인출과 오류를 직접 다루는 작업을 남긴다.
- 반복형: 이미 익힌 절차를 반복하거나 자동화하는 업무다. 핵심 판단과 위험 지점은 직접 확인하되, 예시·표현 다듬기 같은 주변 작업은 위임할 수 있다.
- 일회성: 장기 역량보다 당장의 전달물이 우선인 과제다. 예시·표현 학습과 결과 품질이 중심일 수 있지만, 사실·논리·보안·저작권 검증은 남긴다.
그러므로 모든 과제에 같은 AI 학습 프로토콜을 적용하지 않는다.
4.3 조건부 사용 모델
이 세 사용 방식은 4.2의 과제 유형에 적용하는 작업 배분이다. 대행형은 작업을 전부 넘기고, 예시형은 작업을 줄여 예시로 대체하며, 증폭형은 작업을 남긴 채 AI를 붙인다.
대행형 위임
문제를 이해하기 전에 AI에게 완성 답안·코드·글을 요청하고, 결과를 검증하지 않는 방식이다. 초보자에게 특히 위험하다.
예시형 사용
AI가 만든 고품질 예시를 읽고 구조, 기준, 표현을 분석하는 방식이다. Lira의 예시 노출 조건과 Bauer의 worked example 해석은 이 경로를 지지한다. 예시를 배우는 과제에서는 상호작용 없이도 충분한 효과가 있을 수 있지만, 그 자체가 전이와 판단 능력을 보장하지는 않는다.
증폭형 사용(augmentation)
학습자가 먼저 자기 생각을 만들고, AI를 질문·반례·피드백·비교·예시 도구로 사용하는 방식이다. 현재 근거가 지지하는 가장 유망한 설계지만, 모든 과제에서 다른 방식보다 우월하다고 확정된 것은 아니다.
5. 티어형 AI 보조 학습 프로토콜
0단계: 학습 목표 확인
이번 과제가 숙련목표를 포함하는지, 단순한 결과 제출인지 판단한다.
- 숙련목표가 있으면 아래 프로토콜을 적용한다.
- 일회성 결과 제출이고 재사용·전이가 중요하지 않으면 축약 티어를 사용한다.
- 초보 영역이면 최소한 무보조 확인 단계를 남긴다.
0단계 이후의 티어 매핑
0단계에서 정한 숙련도와 과제 유형을 다음 기본값에 대입한다. 표는 선택을 돕는 지도이지 고정 규칙이 아니다.
| 숙련도 \ 과제 유형 |
학습형 |
반복형 |
일회성 |
| 초보 |
1티어 |
2티어의 단축 진입로 |
3티어 + 무보조 핵심 확인 |
| 숙련 |
1티어 또는 선택적 2티어 |
2티어 |
3티어 |
반복형 업무라도 새 도메인을 배우는 중이면 초보·학습형으로 취급한다.
1티어: 초보·숙련자 모두의 학습형 과제
개념 학습, 코딩 학습, 자격시험, 반복적으로 사용할 기술에 적용한다. 자기 생성은 작업을 먼저 점유하는 단계다.
- 자기 생성: AI를 열기 전에 문제, 가설, 초안 또는 해결 방향을 만든다.
- AI 대화: 답 대신 힌트, 반례, 예시, 질문, 비교를 요청한다. 예를 들면 다음과 같이 쓸 수 있다.
- “내 설명을 모르는 학생처럼 듣고, 이해되지 않는 부분을 한 번에 하나씩 질문해 줘.”
- “내 가설의 약한 부분과 반례가 될 수 있는 조건을 먼저 찾아 줘. 정답을 바로 제시하지 마.”
- “정답이나 완성 코드는 말하지 말고, 다음 단계로 갈 수 있는 힌트만 한 번에 하나씩 줘.”
- “이 해결 방법과 대안의 장단점을 비교하되, 어떤 것을 선택할지는 내가 판단할 수 있게 기준을 먼저 제시해 줘.”
- 판단·통합: 채택·수정·거부한 제안과 이유를 기록한다. 판단만은 넘기지 않는다.
- 무보조 전이: AI를 닫고 설명, 재구현, 디버깅 또는 변형 문제를 수행한다. 작업 능력을 검증하는 단계다.
- 지연 확인: 하루 또는 며칠 뒤 같은 원리를 새 문제에 적용한다.
2티어: 숙련자의 반복형 과제 또는 초보자의 저위험 반복 업무
숙련자는 이미 충분한 스키마가 있고 결과 검증 비용이 낮을 때 이 티어로 들어간다. 초보자는 반복 업무의 구조가 단순하고 즉시 검수할 수 있을 때만 이 단축 진입로를 쓴다.
- 자기 생성은 짧은 가설이나 성공 기준으로 대체한다.
- AI에게 초안·자동화·대안을 요청한다.
- 핵심 판단과 위험 지점만 직접 검증한다.
- 새로운 패턴이나 낯선 부분만 무보조로 재현한다.
3티어: 숙련자의 일회성 과제 또는 초보자의 결과 우선 과제
장기 역량보다 당장의 전달물이 중요한 경우다.
- 1단계 자기 생성으로 목적과 성공 기준을 먼저 정한다.
- AI로 결과물을 만든다.
- 핵심 사실·논리·보안·저작권만 검증한다.
- 초보자라면 결과물에서 재사용할 핵심 개념 하나를 AI 없이 설명하거나 재현한다.
매번 전체 인출 연습을 할 필요는 없지만, 이후 재사용할 핵심 지식은 별도로 남긴다.
이 프로토콜을 쓰지 않아도 되는 경우
- 학습이 목표가 아닌 단순 변환·서식·반복 작업
- 오류 비용이 낮고 결과를 즉시 검수할 수 있는 일회성 작업
- 이미 충분한 숙련이 있고, 과제 자체가 새로운 역량을 요구하지 않는 작업
- AI 없이 다시 수행하는 것이 업무 목적과 무관한 경우
다만 안전, 법률, 의료, 보안, 교육 평가처럼 결과의 책임과 장기 역량이 중요한 영역에서는 축약하더라도 검증과 책임 소재를 생략하지 않는다.
6. 평가 설계: AI를 잡아내기보다 학습을 드러내기
팀 리드나 교육 담당자라면, 지금부터는 개인 학습자의 사용법이 아니라 학습이 실제로 일어났는지를 드러내는 평가 설계를 함께 마련해야 한다.
형성평가는 증거를 수집하고 해석해 다음 학습 행동을 바꾸는 순환이며(Wiliam & Black, 1996; Black & Wiliam, 2009), 생성형 AI 환경에서는 학습자가 결과물의 질을 스스로 판단하는 평가적 판단(evaluative judgement)도 중요하다(Bearman 외, 2024). 산출물 품질은 학습의 증거가 아니다. AI 사용 탐지와 학습 확인은 다른 문제이며, 결과물만 평가하면 AI가 대신한 성과와 학습자의 역량을 구분하기 어렵다.
학습을 드러내는 증거는 다음과 같다.
- AI 사용 전 가설과 초안
- 질문·수정·거부의 기록
- AI 없는 설명 또는 재현
- 변형 과제 수행
- 다음 날의 지연 인출
- 결과물의 선택과 판단에 대한 짧은 구두 설명
이 평가는 AI 사용을 무조건 제한하려는 것이 아니다. 학습자가 AI를 어떻게 사용했는지와 AI가 사라진 뒤 무엇을 할 수 있는지를 함께 평가하려는 것이다.
7. 결론: 학습자가 남겨야 할 작업
학습은 학습자가 생성·인출·어려움 통과·설명 같은 인지적 작업을 수행할 때 형성된다. AI가 그 작업을 대신하면 산출물은 좋아질 수 있어도 역량은 남지 않을 수 있다. 쉬웠다는 느낌과 배웠다는 사실은 분리되며, 산출물 품질만으로 학습을 추론할 수 없다.
그러므로 무엇을 AI에게 맡길지는 학습자의 숙련도와 과제 목표, 그리고 이번 과제에서 반드시 남겨야 할 작업으로 결정한다. 학습자는 먼저 스스로 만들고, 판단만은 직접 하며, 마지막에는 AI 없이 다시 해봐야 한다. 예시 노출은 특정 과제에서 산출물을 개선하는 경계 조건일 수 있지만, 그것을 후속 학습의 증거로 확대하지 않는다.
학습자는 AI보다 빨리 쓰거나 코딩하는 사람이 될 필요는 없다. AI가 만든 결과를 읽고, 질문하고, 검증하고, 수정하고, 책임질 수 있는 작업의 범위를 넓히는 것이 augmentation의 기준이다.
참고 문헌
- Bertsch, S., Pesta, B. J., Wiscott, R., & McDaniel, M. A. (2007). The generation effect: A meta-analytic review.
- Roediger, H. L., & Karpicke, J. D. (2006). Test-enhanced learning.
- Risko, E. F., & Gilbert, S. J. (2016). Cognitive offloading.
- Koriat, A., & Ma'ayan, H. (2005). The effects of encoding fluency and retrieval fluency on judgments of learning.
- Bjork, E. L., & Bjork, R. A. (2011). Making things hard on yourself, but in a good way: Creating desirable difficulties to enhance learning. In Psychology and the Real World, 56–64. 서지 확인 페이지: Bjork Lab.
- Dweck, C. S., & Leggett, E. L. (1988). A social-cognitive approach to motivation and personality.
- Elliot, A. J., Murayama, K., & Pekrun, R. (2011). A 3 × 2 achievement goal model.
- Noordzij, G., Giel, L., & van Mierlo, H. (2021). A meta-analysis of induced achievement goals.
- Wiliam, D., & Black, P. (1996). Meanings and consequences.
- Black, P., & Wiliam, D. (2009). Developing the theory of formative assessment.
- Bearman, M., et al. (2024). Developing evaluative judgement for a time of generative artificial intelligence.
- Roscoe, R. D., & Chi, M. T. H. (2007). Understanding tutor learning.
- Shahriar, T., & Matsuda, N. (2023). What and how you explain matters: Inquisitive teachable agent scaffolds knowledge-building for tutor learning.
- Bastani, H., et al. (2025). Generative AI without guardrails can harm learning.
- Shen, J. H., & Tamkin, A. (2026). How AI Impacts Skill Formation.
- Kosmyna, N., et al. (2025). Your Brain on ChatGPT.
- Lira, B., et al. (2025). Learning not cheating.
- Bauer, N., et al. (2026). Leveraging ChatGPT in academic writing.
