본문으로 건너뛰기

문과생의 첫 Claude 에이전트 실습: 게재 불가 판정 받은 논문, Claude와 다시 분석하고 다시 쓰기

YoYo

2026.10.06

소개

조사 자료로 머신러닝 논문을 써서 학술지에 냈다가 게재 불가 판정을 받았다고 가정하였습니다. 심사의견을 받으면 좀 힘들지요. 코드는 예전에 Stata(연동 파이썬)로 짠 것뿐이고, 분석 과정도 정확히 기억하기 쉽지 않았습니다.

그래서 이번 스터디에서 Claude에게 "분석 비서"를 넘어 "함께 연구하는 동료" 역할을 맡겨 보기로 했습니다. 목표는 세 가지였어요.

  1. 심사의견을 정리하고, 문제가 실제로 있는지 데이터로 확인하기

  2. 문제가 있다면 재분석하기

  3. 이 과정을 다음 연구에도 쓸 수 있는 작업 방식으로 만들기

진행 방법

사용한 도구

  • Claude 데스크톱 앱 Cowork 모드 (Opus 5.5, 노력 수준 중간~높음)

  • 프로젝트 기능: 연구별로 프로젝트를 만들고 지침에 규칙을 저장

  • 폴더 연결: 내 PC의 연구 폴더(원자료, 코드북, 초안, 심사의견)를 연결해 Claude가 직접 읽고 결과를 저장

  • 승인 설정: 처음엔 수동(하나하나 확인), 익숙해진 뒤 긴 작업은 자동

1단계. 프로젝트와 지침 만들기

가장 먼저 원본 데이터를 보호하는 규칙을 지침에 넣었습니다.

# 재분석 프로젝트 지침
[데이터 보호 - 반드시 지킬 것]
- 원본 파일은 절대 수정·삭제·이동하지 않는다. 가공이 필요하면 results 폴더에 사본을 만든다.
- 원자료나 개인 단위 데이터를 공유 링크, 웹, 외부 서비스에 올리지 않는다.
[작업 방식]
- 단계별로 진행하고, 분석 실행 전에 계획을 먼저 보여주고 확인받는다.
- 모든 분석 코드는 results 폴더에 저장해 재현할 수 있게 한다.
- 새 대화를 시작하면 먼저 results 폴더의 00_진행상황.md를 읽고 이어서 진행한다.
- 각 단계가 끝나면 00_진행상황.md를 업데이트한다.
[설명 방식]
- 한국어, 결론 먼저. 전문용어는 처음 나올 때 한 줄로 풀어 설명한다.

2단계. 심사의견 정리

폴더의 심사의견 파일을 읽고,
지적사항을 "번호 / 지적 내용 / 종류(방법·이론·서술) / 재분석 필요 여부 / 대응 방법" 표로 정리해줘.
초안 논문도 참고해서 각 지적이 논문 어느 부분에 해당하는지 적어줘.
결과 파일은 같은 폴더에 results 폴더를 만들어 저장해줘.

Claude는 심사자가 지적한 것뿐 아니라 "심사자는 지적하지 않았지만 초안에서 발견한 문제"까지 따로 뽑아 줬어요. 이게 이후 재분석의 출발점이 됐습니다.

3단계. 데이터로 문제 확인하기

2단계 진행해줘. 원본은 읽기만 해.
1) 데이터의 분석 단위와 그룹 ID 변수가 있는지 코드북과 데이터로 확인해줘.
2) 기존 방식(무작위 분할)과 그룹 단위 분할로 각각 돌렸을 때 성능이 얼마나 다른지 비교 계획을 보여줘.
3) 성능이 우연 수준으로 나온 모형의 원인도 같이 점검해줘.

예전 Stata do 파일도 넣었더니, Claude가 코드를 읽고 논문에 쓴 분석 방법과 실제 코드가 다른 부분까지 찾아냈습니다. 핵심은 데이터 누수였어요. 같은 그룹에 속한 응답자들이 훈련용과 검증용 데이터에 나뉘어 들어가서, 모델이 같은 그룹 정보를 "외워서" 맞히고 있었던 거죠. 그룹 단위로 나누자 예측력이 크게 떨어졌습니다.

4단계. 분석 계획부터 확정하고 재설계

이번에는 결과를 보기 전에 계획서를 먼저 쓰게 했습니다.

분석 실행 전에 "05_분석계획서.md"를 먼저 써줘:
연구 질문, 핵심 변수 정의, 표본, 그룹 단위 분할, 모형, 평가 지표, 심사의견별 대응.
계획서를 내가 확인한 뒤에 분석을 시작해줘.
계획서에 없는 분석을 추가해야 하면 실행 전에 먼저 물어봐줘.

Claude가 가설별로 "지지 / 부분 지지 / 기각"을 판정하고, 계획에 없던 분석은 실행 전에 꼭 물어봤어요. 그 과정에서 예상과 다른, 더 흥미로운 발견이 나왔습니다.

결과와 배운 점

결과

  • 게재 불가 원인을 추측이 아니라 데이터로 확인했습니다.

  • 초안의 인용 오류(내용이 맞지 않는 참고문헌, 목록에서 빠진 문헌)도 함께 찾았습니다.

  • 분석 코드, 계획서, 변경 기록이 전부 파일로 남아 재현 가능한 연구가 됐습니다.

나만의 꿀팁

  1. "원본은 읽기만 해"를 지침과 메시지 양쪽에 넣기

  2. 00_진행상황.md 인수인계 메모: 대화가 길어지면 새 대화로 넘어가되, 메모를 먼저 읽게 하면 맥락이 이어져요.

  3. 계획 먼저, 실행은 확인 후: 결과를 보고 분석을 늘리는 실수를 막아 줘요.

  4. "계획에 없는 분석은 먼저 물어봐": 이 한 줄로 Claude가 혼자 앞서가지 않아요.

  5. AI가 알려준 정보는 직접 확인: 학술지 색인 정보를 틀리게 안내한 적이 있었어요. 중요한 정보는 공식 사이트에서 꼭 확인하세요.

시행착오

  • 폴더를 연결하지 않고 메시지를 보내서 Claude가 파일을 못 찾은 적이 있어요. 입력창 아래 폴더 이름부터 확인하세요.

  • "새 대화"를 프로젝트 첫 화면이 아니라 기존 대화의 답글 칸에서 시작하려다 헤맸습니다.

  • 원자료라고 넣은 파일이 다른 조사 자료였는데, Claude가 대조해서 알려줬어요.

  • 승인을 수동으로 둔 채 밤새 작업을 걸어 두면 허용을 기다리며 멈춰 있어요.

도움이 필요한 부분

  • Pro 요금제에서 긴 작업을 할 때 사용량을 아끼는 요령

  • 분석 결과에서 발표용 PPT를 깔끔하게 뽑는 방법

앞으로의 계획

  • 재분석 결과를 바탕으로 논문을 고쳐 다시 투고하기

  • 결과로 발표용 PPT 만들기

  • 이번 흐름(데이터 → 누수 없는 분석 → 보고서)을 "머신러닝 자동분석" 프로젝트와 스킬로 만들어 다른 연구에도 재사용하기

2

함께 이야기해요 2

로그인하고 댓글을 남겨 주세요

뽀짝이 프로필 이미지
뽀짝이2026.10.06

YoYo님, 심사의견을 "지적 내용 / 종류 / 재분석 필요 여부" 표로 먼저 정리하고, 그다음 분석 계획서(05_분석계획서.md)를 확인한 뒤에 분석을 시작하게 한 순서가 인상 깊어요.

같은 그룹 응답자가 훈련·검증 데이터에 나뉘어 들어가는 데이터 누수를 Stata 코드와 논문 서술을 맞춰 보다가 찾아낸 대목이 특히 재밌었어요. 그리고 "계획에 없는 분석은 먼저 물어봐줘" 한 줄과 00_진행상황.md 인수인계 메모는 바로 가져다 쓰고 싶은 팁이에요.

꼬리 탁! 치고 응원하고 갈게요 🐈‍⬛

박정기 프로필 이미지
박정기2026.10.08

"원본은 읽기만 해"를 지침과 메시지 양쪽에 넣고, 00_진행상황.md로 대화를 이어 가고, 결과 보기 전에 계획서부터 확정하는 흐름이 연구 작업의 정석 같아서 감탄하며 읽었어요!! 😊 데이터 누수를 데이터로 확인하신 과정도 너무 흥미로웠습니다 ㅎㅎ

질문 주신 두 가지에 저라면 이렇게 해볼 것 같아요!

1. 사용량 아끼기

  • 단계마다 모델과 노력 수준을 다르게 쓰는 거예요. 심사의견 정리나 파일 정리처럼 가벼운 단계는 낮게, 재분석 설계처럼 중요한 단계만 높게 쓰면 부담이 줄어듭니다.

  • 이미 하고 계신 것처럼 대화가 길어지면 새 대화로 넘어가는 게 좋아요. 긴 대화는 매번 앞 내용을 다시 읽느라 사용량이 더 많이 들거든요.

  • 큰 원자료를 통째로 읽히기보다 "변수 목록과 상위 몇 행만 먼저 봐줘"처럼 시작하면 아낄 수 있습니다.

  • 지침과 프로젝트 지식 파일이 너무 길면 매 대화에 실리니까, 꼭 필요한 규칙만 남겨 두세요!

2. 발표용 PPT
PPT 스킬 : 페이퍼로지 검색해서 써보세요!! 좋을겁니다!

재분석 결과로 논문 다시 투고하시는 과정도 기대할게요. 좋은 사례 감사합니다 🙌

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기