저널 투고 전 원고 심사 받기 (Rev2Agent 활용)
2026.10.22
소개
임상 연구 원고를 저널에 투고하려고 준비 중인데요. 투고 전에 미리 가상의 리뷰어에게 심사를 받아볼 수 있다는 이야기를 듣고 적용을 해보았습니다.
GitHub에 Rev2Agent라는 공개 연구 에이전트(MIT 라이선스)인데 그 안의 "모의 심사 패널" 규칙만 제 연구환경으로 가져와서 셋팅을 진행했습니다. 심사자 5명이 서로 의견을 보지 못하게 독립 심사를 진행하고, 편집장이 종합하는 구조입니다.
진행 방법
Claude code 데스크탑 앱을 사용했습니다.
0단계 - 파일 읽기
"C:\Users[사용자]\Downloads\rev2agent-main" -> 이 스킬이 어떻게 동작하는지 내용을 살펴봐. 작업은 하지 말고.1단계 - 계획 세우기
8단계 모의 심사 규칙과 간이 프롬프트만 뽑아서 내 원고(docx, 임상연구, JPP)에 맞게 다시 짜보자. 우선 계획만 세워봐.모의 심사 대상 원고는 수정하지 않음
심사 대상 원고를 복사해서 해당 파일에 메모로 피드백을 표시하도록 기능 추가
편집장은 fable, 리뷰어는 opus 모델로 수행, 서로 독립된 맥락에서 진행
외부 독립검증을 위해 codex worker에게 추가 작업 지시
심사자들에게 공개할 자료는 리뷰 요청 시 연구자가 링크로 전달
설명은 한국어로, 수정 방향 제안은 원고와 동일한 언어로
모델별 토큰 사용량 기록
2단계 - 스킬 구조 셋팅
SKILL.md 실행 방식(간이 심사 / 전체 패널), 실행 인자, 산출물 자리, 검증
SOURCE.md Rev2Agent에서 무엇을 가져오고 무엇을 버렸는지 (MIT 고지)
editor.md 편집장 절차: 준비 -> 심사자 5명 -> 인용 검증 -> 절별 점검 -> 반론 대장 -> 종합 -> 메모 사본 -> 사용량 -> 보고서
quick_review.md 간이 심사(심사자 1명) 절차 + 간이 심사자 지시문
debate_codex.md Codex 읽기 전용 쟁점 토론
study_context.md 편집장 전용: 연구자 결정 문서를 "가리키기만" 함 (심사자에게는 기본 비공개)
journals/JPP.md 저널 설정 (공식 페이지로 확인한 규정)
journals/JPP_sources_20261022/ 공식 페이지 원문 사본 32건
reviewers/common.md 심사자 공통 지시문 (구조 점검 8항목, 인용 규칙, 출력 JSON 형식)
reviewers/A_statistics.md / B_reporting.md / C_domain.md / D_skeptic.md / E_presentation.md
templates/report_template.md
scripts/extract_docx.py 변경 추적을 수락한 본문을 문단·표 칸 단위로 추출 (기존 메모 제외)
scripts/verify_quotes.py 심사자 인용이 원고에 글자 그대로 있는지 대조 (0건이면 실패)
scripts/annotate_copy.py 사본에 Word 메모 붙이기 (ZIP 안 XML만 고치는 방식, 자체 검증 9항목)
scripts/render_major.py Major 지적을 보고서 절 형식으로 그대로 옮기기
scripts/usage_log.py 단계별 사용량 표
scripts/tests/ 시험 61개 + 실제 원고 사본 회귀 시험심사자 다섯명의 역할 배정
심사자 | Rev2Agent 원래 역할 | 바꾼 역할 |
|---|---|---|
A | 통계학자 | 평균 회귀, 다중비교, 군집, 신뢰도 |
B | 비교 공정성(SOTA) | 보고 지침(TREND·TIDieR·CONSORT-EHEALTH) |
C | 분야 전문가 | 언어병리학자 |
D | 회의적 독자 | 과대주장, 인과 서술, 대안 설명 |
E | 글쓰기 | 저널 형식, AMA 양식, 표·각주 |
3단계 - 저널 규정, 공식 페이지로 점검
웹 화면이 403으로 막혀서 공개 문서 API로 원문 다운로드
공식 원문 사본을 스킬 폴더에 날짜 기준으로 보관
4단계 - 간이 심사 실시
manuscript-review 스킬로 간이 심사를 해줘. 대상 원고: "C:\Users[사용자]\OneDrive\Desktop\연구논문\manuscript_v0.2\original_paper_draft_20261020.docx". 결과는 판정 Major Revision, 지적 22건(Critical 0, Major 4, Minor 18)이었습니다.
5단계 - 보고서 고도화
major revision의 경우, 피드백 내용과 맥락을 연구자가 이해하기 쉽게 설명을 추가해.결과와 배운 점
다른 분이 설계한 에이전트를 바로 설치하지 않고 내 맥락에 맞게 수정하는 것이 필요합니다. 깃헙 공개 에이전트는 ML 실험용이었고 심사 규칙은 활용 가능하지만 연구 맥락과 방법론이 다른 부분은 수정이 필요했습니다.
편집장과 심사자에게 제공하는 정보를 구분하고 심사자 간 독립성을 유지하도록 설계한 점이 실제 심사과정과 유사하게 설계가 되었다고 생각합니다. 에이전트 설정 시 위계를 설계하고 각 에이전트가 수행할 과업 정의, 제공해야 할 정보, 그리고 작업 프로세스를 종합 설계하는 것이 중요합니다.
도움 받은 글
Rev2Agent - https://github.com/dalbom/rev2agent (MIT).



