본문으로 건너뛰기

현장 시나리오 3개로 진짜 테스트 하기

애진

2026.08.04

형식이 무너지지 않는지만 봤던 지난 테스트를 넘어서, 실제로 쓸 법한 상황 3개(어르신 디지털교육·청소년 진로·장애인 프로그램)를 넣어 내용 자체가 쓸만한지 확인했다.

이 글은 이런 분께

  • 커스텀 GPT를 만들었는데, “형식만 맞고 내용은 별로면 어떡하지” 걱정되는 분

  • 테스트를 어떻게 설계해야 진짜 문제를 찾을 수 있는지 궁금한 분

Before — 형식만 확인했던 상태

지난 테스트에서는 청소년 진로 탐색 예시로 “개요→활동지→퀴즈 순서가 안 무너지나”만 확인했다. 오늘은 4주 실행계획 2주차 2일차대로, 실제로 현장에서 쓸 법한 상황 3개를 넣어서 내용 자체가 쓸만한지까지 본다.

테스트 계획 — 시나리오 3개

일부러 서로 다른 난이도·제약 조건을 넣어서, GPT가 조건을 무시하고 뭉뚱그리지 않는지 확인한다.

시나리오 1 — 어르신 디지털교육

대상: 어르신 12명 (평생교육원 스마트폰 활용반)
주제: 카카오톡으로 사진 보내기 실습
시간: 60분
강의 목표: 참여자가 스스로 사진을 찍어 카카오톡으로 가족에게 보낼 수 있다
난이도: 쉬움 (기기 다루기 낯선 어르신 다수)
공간·장비 제약: 컴퓨터실 아님, 각자 스마트폰 지참, 와이파이 있음
복사

시나리오 2 — 청소년 진로

대상: 중학생 25명 (자유학기제 진로수업)
주제: 직업 카드 활동으로 나만의 강점 찾기
시간: 45분
강의 목표: 참여자가 자신의 강점과 어울리는 직업군을 카드 활동으로 스스로 골라본다
난이도: 보통
공간·장비 제약: 책상 이동 가능한 일반 교실, 프로젝터 없음 (인쇄물로만 진행)
복사

시나리오 3 — 장애인 프로그램

대상: 발달장애인 성인 8명 (주간보호센터)
주제: 계절 인사 카드 만들기 (소근육 활동 + 감정표현)
시간: 40분
강의 목표: 참여자가 도움을 받아서라도 카드 1장을 완성해 감정을 표현한다
난이도: 낮음 (개별 지원 필요, 반복 설명 필요)
공간·장비 제약: 휠체어 이동 가능한 넓은 테이블, 별도 장비 없음
복사

시나리오 1 결과 — 어르신 디지털교육

개요·활동지·퀴즈 3개 다 나왔고, 조건도 잘 반영됐다.

잘 된 점

  • “컴퓨터실 아님, 스마트폰 지참” 조건 → 스마트폰 실습으로 자연스럽게 설계됨

  • “쉬움 난이도” 조건 → “설명은 짧고 천천히, 한 번에 한 단계만” 같은 구체적 운영 팁으로 반영됨

  • 사진 찍기 → 카톡 열기 → 사진 선택 → 보내기, 단계가 실제로 따라 하기 쉽게 잘게 쪼개져 있음

  • 실제 화면(ChatGPT)에서는 제목·목록 계층이 잘 나뉘어 보임 (복사해서 옮기면 서식이 풀리는 것뿐, 실사용엔 문제없음)

아쉬운 점

  • 시간 배분(도입10 / 전개1 15 / 전개2 25 / 마무리10)이 표가 아니라 줄글로만 나와서 한눈에 안 들어옴 → 지시문 다듬는 날 “시간 배분은 항상 표로” 규칙 추가할 재료로 메모

시나리오 2 결과 — 청소년 진로

개요·활동지·퀴즈 3개 다 나왔고, 시나리오 1보다 조건 반영이 더 명시적이었다.

잘 된 점

  • “프로젝터 없음” 조건 → 유의사항에 “프로젝터가 없으므로 카드와 활동지는 글씨를 크게 인쇄한다”라고 직접 언급함

  • 시간 배분(도입5 + 전개1 15 + 전개2 15 + 마무리10 = 45분) 정확히 맞음

  • “직업의 정답이나 우열을 이야기하지 않는다”, “친구 의견 비판하지 않기” 등 진로수업다운 배려가 자연스럽게 들어감

  • 요청하지 않은 준비물(직업카드·강점카드·A3 활동지)까지 스스로 챙겨서 제안함

아쉬운 점

  • 시나리오 1과 똑같이, 시간 배분이 표가 아니라 텍스트로만 나옴 → 두 번 반복된 패턴이라 지시문 수정 1순위 후보로 확정

시나리오 3 결과 — 장애인 프로그램

셋 중 조건 반영이 가장 세심했다.

잘 된 점

  • “휠체어 이동 가능한 넓은 테이블” 조건 → 유의사항에 “휠체어 이동 공간을 충분히 확보한다”로 정확히 반영

  • “개별 지원·반복 설명 필요” 조건 → “같은 설명을 여러 번 반복해도 괜찮다”, “손 기능이 어려운 경우 부분 도움 제공” 등 구체적으로 반영

  • 퀴즈를 서술형이 아니라 OX·말하기로 낮춰서 냈고, “말로 표현이 어려우면 그림을 가리켜도 참여로 인정한다”는 배려까지 스스로 넣음

  • “완성도보다 참여 과정을 중심으로 진행한다” — 대상 특성에 딱 맞는 진행 태도까지 잡아줌

아쉬운 점

  • 역시 시간 배분(도입5 + 전개1 20 + 전개2 10 + 마무리5 = 40분)이 표가 아니라 텍스트로만 나옴 — 3번 모두 반복된 패턴

배운 것 / 재사용 자산

결과 요약

  • 3개 시나리오(어르신 디지털교육 / 청소년 진로 / 장애인 프로그램) 모두 개요·활동지·퀴즈 3종 세트가 빠짐없이 나왔다.

  • 대상이 까다로울수록(장애인 프로그램) 오히려 조건을 더 세심하게 반영하는 경향을 확인했다. 공간·장비 제약, 난이도, 개별 지원 필요 같은 조건을 무시하거나 뭉뚱그리지 않고 유의사항·활동 설계에 실제로 녹여냈다.

  • 공통으로 반복된 문제 하나: 시간 배분이 항상 텍스트 목록으로만 나오고 표로 안 나온다. 3개 시나리오 모두 같은 패턴이라, 지시문에 “시간 배분은 항상 표로 정리” 규칙을 추가하면 바로 개선될 것으로 보인다.

현장 테스트 체크리스트 (재사용 자산)

  • 대상 난이도를 의도적으로 다르게 설정해서(쉬움/보통/까다로움) 테스트했나?

  • 공간·장비 제약이 활동 설계에 실제로 반영됐나, 그냥 무시됐나?

  • 결과에서 반복되는 아쉬운 점이 있다면 → 그게 다음 지시문 수정의 1순위 후보

재테스트 — 지시문 수정 후 시나리오 1 다시 돌려봄

원래 계획으로는 내일(3일차) 할 일이지만, 오늘 발견한 문제가 명확해서 바로 지시문을 고쳐 재테스트했다.

고친 것: “반드시 단계별 시간 배분을 포함하며”라는 문장 뒤에 “표(단계 | 소요 시간 | 진행 내용) 형식으로 정리한다”를 추가.

결과: 어르신 디지털교육 시나리오로 다시 돌렸더니 시간 배분이 표로 정확히 나왔다.

단계

소요 시간

진행 내용

도입

10분

인사, 목표 안내, 시연

전개1

15분

사진 촬영 실습

전개2

25분

카카오톡 전송 실습 및 반복

정리

10분

복습, 질의응답

덤으로 퀴즈도 OX·객관식·단답형·실습형 4종류 + 문제마다 해설까지 붙어서 더 알차졌다. 지침 한 줄만 고쳤는데 표 문제는 해결되고, 요청하지 않은 부분(퀴즈 다양성)까지 자연스럽게 좋아진 게 흥미로웠다.

청소년 진로 시나리오로도 재테스트했다. 시간 배분이 표로(7+10+18+10=45분) 정확히 나왔고, 퀴즈 4종류+해설, “직업 우열 비교하지 않기” 배려까지 그대로 유지됐다. 지침 수정 하나로 시나리오가 바뀌어도 일관되게 적용되는 걸 확인했다.

장애인 프로그램 시나리오로도 재테스트했다. 시간 배분이 표로(5+10+20+5=40분) 정확히 나왔다. 특히 퀴즈 중 하나(“지금 내 기분과 같은 그림을 골라보세요”)를 “정답 없음(자신의 감정을 선택하면 정답)“으로 설계해서, 이 대상 특성에 맞게 퀴즈 난이도 자체를 스스로 낮춘 것이 인상적이었다.

결론: 지침에 한 줄 추가한 것만으로 3개 시나리오 전부에서 일관되게 표 형식이 적용됐다. GPT가 대상 특성에 따라 세부 표현(퀴즈 난이도, 유의사항 등)을 알아서 조정하는 능력도 다시 한번 확인했다.

1

함께 이야기해요 1

로그인하고 댓글을 남겨 주세요

아루나 프로필 이미지
아루나2026.08.05

대상 특성에 맞게 퀴즈 난이도 자체를 스스로 낮췄다니, 따로 시킨게 아닌데도 그렇게 한 거라면은 되게 신기하네요. 그리고 gpts만으로 원하는 정도의 mvp를 잘 구현해 내신 거 같습니다. 잘하셨어요! 이걸로 어느 정도 실제 테스트가 되고 가동이 될 정도로 만들어 지셨으면, 여기에 있는 프롬프트 지침을 활용해서 클로드에서 에이전트를 만들수있어요. 그럼 직원처럼 대신 일할 수 있는 봇을 만들 수도 있을 거예요!

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요