AI 공동작업 원고, '그림과 본문이 맞는가'부터 다시 보기: 결과 일관성 점검
2026.10.22
소개
작성하던 사회과학 논문을, 학술지에 투고하기 전 최종 점검한 과정입니다.
분석과 초고 작성은 끝난 상태였지만, 투고 화면에서 보충자료 그림을 올리다가 문제를 발견했습니다. 보충 그림에서는 핵심 변수 하나의 연관이 특정 하위집단에서만 뚜렷했는데, 원고의 초록·결론과 Scope statement에는 “모든 집단에서” 연관이 있다고 쓰여 있었습니다. 분석 결과보다 한 걸음 앞서 나간 것입니다.
이번 작업의 목표는 세 가지였습니다.
본문 서술과 표·그림 결과의 불일치를 모두 찾아 바로잡기
결과를 과장하지 않으면서 정책 함의는 또렷하게 살리기
학술지 제출 규격(그림 파일, 표 위치, 보충자료 구성)에 맞게 파일 정리하기
진행 방법
Claude를 두 역할로 나눠 썼습니다.
프로젝트 Claude: 분석 결과와 원고 파일을 모두 알고 있어 실제 작업 담당
일반 대화창 Claude: 화면 캡처와 수정 결과를 보여 주며 '제3자 검토자'로 활용. 무엇을 고칠지 판단하고 프로젝트에 보낼 프롬프트를 다듬는 역할
작업하는 AI와 검토하는 AI를 나누니, 같은 AI가 자기 글을 자기가 검토하는 문제를 줄일 수 있었습니다.
1단계: 결과-서술 불일치 수정
[이미지: 하위집단별 계수 그림(보충자료)]
다른 부분은 이미 확인을 마친 상태라 문제 지점만 고치도록 범위를 좁혔습니다. 범위를 제한하지 않으면 AI가 멀쩡한 문장까지 손대는 경우가 있어서입니다.
폴더의 원고 최종본과 투고용 요약문에서 다음 한 가지만 확인해 줘.
[보충 그림 번호]를 보면 [핵심 변수 A]의 연관은 [하위집단 1]에서만 유의하고,
[하위집단 2]에서는 0에 가까우며 신뢰구간이 0을 포함한다.
[핵심 변수 B]는 두 집단 모두에서 유의하다.
1. 요약문의 "[현재 문장]"이 이 결과와 맞는지 확인해 줘.
"[결과에 맞는 문장]"으로 바꿀 경우 글자 수 제한 이내인지도 확인할 것.
2. 원고에서 [핵심 변수 A]가 두 집단 모두에서 연관된 것처럼 읽히는 문장이 있는지
(초록, 결과, 논의, 결론 포함) 확인해 줘.
상호작용 결합 검정은 유의하지 않았으므로, 집단 간 차이가 탐색적 결과로 서술되어 있는지도 확인할 것.
그 외 내용은 건드리지 말 것.
확인한 문장은 수정 전·후를 표로 보여 줘."수정 전·후를 표로" 요청한 덕분에 초록, 논의, 결론 등 여러 곳이 어떻게 바뀌었는지 한눈에 검토할 수 있었습니다.
2단계: 표현 정밀화와 정책 함의 보강
비교표를 검토해 보니 두 가지가 더 보였습니다.
"집단 간 차이가 강건하지 않다"는 문장이 변수의 연관 자체가 약하다는 뜻으로 읽힐 수 있었습니다(실제로 전체 표본의 연관은 모든 강건성 검정에서 유의).
불일치를 고치느라 해당 분야의 정책 논의가 오히려 줄었습니다.
저는 집단 간 격차를 단정적으로 강조하고 싶었는데, 검토 Claude는 근거 수준(결합 검정 비유의, 강건성 검정에서 미재현)을 들어 단정을 말렸습니다. 대신 "관찰된 사실은 단호하게, 해석은 신중하게" 쓰는 절충안을 제안받았고, 결과적으로 힘 있으면서도 리뷰어에게 공격받지 않는 문장이 됐습니다.
수정 잘 확인했다. 다음을 추가로 반영해 정오표를 갱신해 줘.
1. [해당 절]의 "[문제 문장]"은 변수의 연관 자체가 약하다고 읽힐 수 있다.
전체 표본의 연관은 모든 강건성 검정에서 유의했으므로,
강건하지 않은 것은 '집단 간 차이'라는 점이 분명히 드러나게 고칠 수 있는 문구 제안.
2. 정책 함의 강조
- 관찰된 사실은 단정적으로, 해석은 "suggests" 수준으로 확인결과를 정직하게 고친 것이 오히려 논문의 새로운 논점이 되었습니다. "접근의 격차는 좁혀졌지만 혜택의 격차는 남아 있을 수 있다"는 방향의 정책 메시지가 이 과정에서 나왔습니다.
결과와 배운 점
최종적으로 원고(Word+PDF), 본문 그림, 보충자료, 보고 지침 체크리스트를 갖췄습니다.
배운 점과 꿀팁
AI 원고는 '그림과 본문'을 대조하며 읽어야 합니다. AI는 그럴듯한 요약 문장을 잘 쓰지만 하위집단별 결과처럼 세부 결과를 뭉뚱그리는 경향이 있습니다. 초록, 결론, 투고용 요약문처럼 압축된 문장에서 과잉 일반화가 특히 잘 생깁니다.
수정 범위는 좁게, 결과는 '수정 전·후 표'로 받으세요. "그 외 내용은 건드리지 말 것"과 "수정 전·후를 표로"를 함께 쓰면 검토가 훨씬 쉬워집니다.
작업 AI와 검토 AI를 분리하세요. 한쪽이 고치고 다른 대화창의 AI에게 캡처를 보여 주며 검토받으니 놓친 부분이 잘 보였습니다.
시행착오
원고를 고친 뒤 PDF를 새로 만들지 않으면 심사자가 보는 PDF에 이전 내용이 남아 있다고 추정합니다. Word와 PDF는 항상 함께 교체해야 합니다.
앞으로의 계획
심사 의견이 오면 리뷰어 코멘트를 항목별로 정리하고 답변서를 작성하는 과정도 같은 방식(작업 AI + 검토 AI)으로 진행해 볼 예정입니다. 이번에 탐색적 결과로 남겨 둔 분석내용은 후속 연구 주제로 발전시켜 볼 생각입니다.
도움 받은 글
투고 학술지의 저자 가이드라인(제출 규격, 그림·표 형식) PDF파일 등



