형태소 분석 문제 출제 자동화
2024.08.27

배경
많은 고등학생들이 국어 문법 중 '형태소 분석' 을 어려워함
모의고사/수능에서 오답률이 높은 항목이기에 매일 뉴스레터로 이메일, 인스타그램 DM(URL 전송)으로 문제를 전송해 풀이함으로써 문법능력 향상 목적으로 자동화 구축
방법
형태소는 자연어에서 가장 작은 말의 단위이므로, 별도의 말뭉치(코퍼스)를 연결해 단어,구절,문장 등을 분석할 수 있지만, 프롬프트를 효과적으로 활용하면 말뭉치가 없어도 분석 가능
말뭉치를 대신할 LLM은 클로드가 가장 적합
시나리오
1. Webhooks - Custom webhook (트리거)
JSON - Parse JSON
Tools - Text parser (텍스트 전처리에 사용)
HTTP - Make a request (KoNLPy API 호출을 위해 사용)
Tools - Set variable
Google Sheets - Add a row (결과 저장, MongoDB 대신 사용)
Webhooks - Respond to a webhook
모듈 세부 구성방법
Webhooks - Custom webhook (트리거)
새 webhook 생성
메서드: POST
URL 경로 설정
2. JSON - Parse JSON
데이터 구조

'text' 필드를 추출하여 다음 모듈로 전달
3. Tools - Text parser 입력: 이전 단계에서 추출한 'text'
작업:
불필요한 공백 제거
특수문자 제거 (선택적)
정규표현식 사용:
공백 정리:
\s+를 단일 공백으로 대체특수문자 제거:
[^\w\s]를 빈 문자열로 대체
HTTP - Make a request
메서드: POST
URL: KoNLPy API 엔드포인트
헤더: Content-Type: application/json
바디

5. Tools - Set variable
변수명: analyzed_result
값: HTTP 요청의 응답 결과 (JSON 형식)
6. Google Sheets - Add a row
스프레드시트 선택 또는 생성
워크시트 선택 또는 생성
열 구성: A: 원본 텍스트 B: 분석 결과 (JSON 문자열) C: 타임스탬프
데이터 매핑: A: 2단계의 원본 'text' B: 5단계의 'analyzed_result' (JSON.stringify() 사용) C: 현재 시간
7.Webhooks - Respond to a webhook
상태 코드: 200
응답 본문: 5단계의 'analyzed_result'
응답 컨텐츠 타입: application/json
현재의 결과물은 학생들에게 학습동기 제공이 부족해 퀴즈형식의 웹페이지로 업데이트 ing....




endpoint에 mecab도 있나용
endpoint URL을 잘못 입력했는지, 오류가 발생해 아직 수정하지 못했습니다. 그래서 카카오 등 다른 API를 사용하지 않고 클로드 API를 활용해서 구축하고 있는데, 매끄럽지 못합니다..
업데이트가 많이 필요합니다요....