내 과제를 인터뷰에 넣었더니 — 명리분석부 PLAN.md → Ouroboros Interview → Seed, 1주차에 놓친 경계를 AI가 먼저 묻다
2026.10.20
소개
『논어』 「위정」에 「知之爲知之 不知爲不知 是知也(지지위지지 부지위부지 시지야)」, 아는 것을 안다 하고 모르는 것을 모른다 하는 것이 앎이라 했습니다. 이번 실습에서 가장 크게 배운 것이 이 한 줄이었습니다. 하네스가 좋아진다는 것은 더 많이 아는 것이 아니라, 모르는 것을 "미정"으로 정직하게 남기는 일이었습니다.
3주차 수업(10/15)은 몸이 좋지 않아 결석했습니다. 배포된 「통합 실습 가이드(INTEGRATED FIELD GUIDE)」로 보강하고, 가이드의 순서(PLAN.md → Interview → Seed → 원본 보관)를 1주차에 손으로 짰던 '명리분석부'에 그대로 적용해 보았습니다. 2주차가 장난감 과제(할 일 목록)로 절차를 익힌 것이라면, 3주차는 그 절차에 내 실제 과제를 넣어 본 것입니다.
진행 방법
도구: Claude Code(실습 직전 v2.1.301로 업데이트) + Ouroboros 플러그인 0.55.6(인터뷰 직전 0.56.0 업데이트 제안은 건너뜀 — 2주차와 같은 버전으로 비교하기 위해).
① PLAN.md (37줄) — 가이드 3장 서식에 명리분석부를 채웠습니다. 핵심은 「반드시 제외」 네 항목입니다.
- 시진만 적힌 시각(오시·미시)을 임의의 분으로 확정하는 것
- 입춘·절입 전후 1시간 안의 시각을 확인 없이 확정하는 것
- 서머타임 기간을 무시하는 것
- 출처 없는 고전 인용② 인터뷰 — 대화창에 이렇게 넣었습니다.
ooo interview 이 폴더의 PLAN.md를 먼저 읽어줘.
가상 명식으로 사주 분석 초안을 쓰는 '명리분석부' 하네스를 만들고 싶어.
여덟 글자와 대운은 만세력 코드가 계산하고, LLM은 해석 초안만 쓴다.
PLAN.md의 '미정' 항목과, PLAN.md에 없지만 판정에 필요한 경계 사례를 먼저 질문해줘.인터뷰는 Q1~Q10, 10라운드였습니다. 라운드마다 AI가 검토 에이전트 2~3개(데이터 맥락, 반대 관점, 단순화)를 따로 돌린 뒤 선택지를 냈고, 답을 받으면 「정리 노트」로 되돌려 확인(Refine)을 받았습니다. 저는 권장안을 그대로 고르기보다 「1번을 바탕으로 하되 …」처럼 복합 답을 주로 썼습니다(가이드 4.2).
③ Seed와 원본 보관 — ooo seed 후, 인터뷰와 Seed를 requirements/import-v1/에 복사하고 SHA256을 provenance.json에 기록하게 했습니다. Seed 품질 점검이 REVISE로 나와 수정본(seed-revised-v1.yaml)을 따로 만들었고, 원본은 그대로 두었습니다. Run은 하지 않았습니다.
[캡처 1 — Q1: 시주 기준 시각(진태양시·균시차) 질문] [캡처 2 — 모호 항목 정리표: 1908~1911년 +8:30 시기 발견] [캡처 3 — 시진 입력 질문: '오시'를 무엇으로 볼까요?] [캡처 4 — Seed 품질 점검 REVISE 0.55와 빠진 결정 목록]
결과와 배운 점
항목 | 결과 |
|---|---|
인터뷰 | 10라운드, 모호도 0.18, 미정 8건(처음 9건 중 1건은 뒤 라운드에서 해결) |
Seed v0 | seed_7df459e62c3d, 품질 점검 REVISE 0.55 (기준 0.90) |
Seed 수정본 v1 | 조건 35개, 수용 기준 8개(모두 검증 명령 있음), 미정 8건, 품질 점검 REVISE 0.74 |
평가세트 | 봉인 v0는 그대로 두고 v0.1로 확장(F7~F21, F22 조건부), 결함 주입 I-0(대조군)~I-6 |
걸린 시간 | 계획 1시간 → 실제 약 2시간 |
모호도 0.18은 2주차 할 일 목록(0.094)보다 높습니다. 그러나 과제의 난도가 다르고, AI가 확정하지 못한 것을 지어내지 않고 "미정 8건"으로 남긴 결과라 오히려 믿을 만한 숫자로 읽었습니다.
1주차와 나란히 놓으면
1주차 실패 | 3주차에 바뀐 모습 |
|---|---|
「오시」 같은 시진 표기를 Master가 CLEAR로 통과 | AI가 먼저 "시진을 보정된 시각으로 볼까, 시계 시각으로 볼까"를 물음 → 시지만 확정·분은 미정, '자시'만 적힌 입력은 멈춤, 결함 I-3(치명) |
가짜 『적천수』「을목장」 인용 | 출처 칸만으로는 못 막는다는 것을 확인 → 원전 목차 목록과 대조하는 스크립트 + 다른 계열 모델, 결함 I-5(치명) |
같은 계열 모델끼리 PASS | 객관층은 정답 파일 대조 스크립트, 대조군 I-0에서 오탐 0건이어야 통과 |
배운 점은 네 가지입니다.
첫째, PLAN.md를 주자 AI가 PLAN.md 밖의 경계를 찾았다. 1954~1961년과 1908~1911년, 두 번의 한국 표준시 +8:30 시기, 그리고 「서울 −32분」(지방평균시)과 「127.5° 고정 −30분」이 다르다는 점은 제 PLAN.md에 없었습니다. 1주차에 제가 놓친 「시진만 적힌 시각」도 이번에는 AI가 먼저 물었습니다. 가이드 3장의 말대로, 출발점을 주어야 질문이 좋아졌습니다.
둘째, AI의 권장안은 '업계 일반'을 기본값으로 깐다. 해석 초안의 판단층 권장안은 격국·용신·희신이었습니다. 저는 탈도사 4관법으로 음양과 간지 관계를 보는 쪽이라, 틀(판단층/서술층 분리, 규칙 ID 필수)은 살리고 항목을 바꿨습니다. 네 관법의 이름은 아직 정리 전이라 빈칸으로 두었더니, AI가 「하네스·LLM이 관법 이름이나 정의를 지어내지 않음」을 명세에 스스로 덧붙였습니다. 가이드의 「도메인 지식은 생략할 수 없다」를 실감했습니다.
셋째, 사람의 자료가 AI의 요약을 고친다. 야자시를 정하는 라운드에서 인터뷰 요약에는 「야자시 시간(時干)은 당일 일간 기준」으로 들어갔습니다. 제 강의 자료의 시두법 표(甲己日 야자시 = 丙子時)와 대조해 보니 「다음 날 일간 기준」이 맞았고, 그 결과 시각 미상 때의 시주 후보도 12개가 아니라 13개였습니다. 하나의 결정이 뒤의 판정(후보 수, '자시' 입력 처리)까지 연쇄로 바꿨습니다. 가이드가 말하는 L3(업무 정합성) 검수는 결국 사람이 자기 1차 자료로 대조하는 일이었습니다.
넷째, 인터뷰에서 정한 것이 Seed에 다 들어가지는 않는다. Seed 품질 점검은 0.55로 REVISE였습니다. 후반에 정한 F16~F21, 결함 정의 표, 미정 목록이 빠져 있었고, 수용 기준 하나는 앞에서 정한 ±1분과 충돌했습니다. 2주차가 「AI 평가 0.90인데 미검증」이었다면, 3주차는 「인터뷰는 끝났는데 명세가 빠졌다」입니다. 단계와 단계 사이에도 검수가 필요합니다. 수정본의 2차 점검에서는 AI가 Reviewer의 지적 두 건(F7 '해시'가 오타라는 지적 등)을 근거를 들어 반박했는데, 가이드 9.5의 「Master가 Reviewer 결론을 뒤집을 때는 이유와 증거를 기록」과 같은 장면이었습니다.
시행착오
메모장에 PLAN.md를 붙여 넣었는데 저장이 안 되어 빈 파일이었습니다. Claude Code에게 "이 내용을 PLAN.md에 저장해줘"로 해결했습니다. 확인 질문(「'반드시 제외'만 보여줘」)을 하지 않았다면 빈 PLAN으로 인터뷰를 할 뻔했습니다.
선택 화면에서 메모만 달고 보기를 고르지 않아 「(notes only)」로 제출될 뻔했습니다. 확인 화면을 끝까지 읽는 습관이 필요합니다.
Seed 원본 파일이 디스크(~/.ouroboros/seeds/)에 없어서, 복사본이 원본과 바이트 단위로 같은지는 검증하지 못했습니다. AI는 그 사실을 provenance.json에 적어 두었습니다.
1시간 계획이 2시간이 됐습니다. 인터뷰가 10라운드까지 이어져, Q10에서 「남은 항목은 권장안, 확정 못 한 것은 미정으로」 하고 닫았습니다.
나만의 팁
인터뷰 요청문에 「PLAN.md에 없지만 판정에 필요한 경계 사례를 먼저 질문해줘」를 넣으면 AI가 PLAN 밖을 찾습니다.
정리 노트(Refine)가 나올 때마다 내 1차 자료와 대조하십시오. 저는 시두법 표 한 장으로 두 개의 결정을 바로잡았습니다.
새 원칙을 정했으면 그 원칙을 시험할 사례도 같은 자리에서 평가세트에 추가하십시오(이번에 F7~F21이 그렇게 생겼습니다). 봉인 세트는 고치지 말고 버전을 올립니다(v0 → v0.1).
「코드와 일치」를 성공 조건으로 쓰면 코드가 코드를 채점합니다. 정답 파일(KASI 절기표·음양력, 시두법 표)은 계산 코드와 따로 둡니다.
도움이 필요한 부분: Seed 품질 점검을 0.90까지 올려 보신 분이 있으면, 수용 기준을 "기계로 검사 가능한 형식"으로 쓰는 요령을 듣고 싶습니다.
< 앞으로의 계획이 있다면 들려주세요 >
4주차 전까지 미정 8건 중 제가 직접 할 수 있는 것부터 닫겠습니다. 시두법 표와 원전 목차 목록, 4관법 규칙 목록(rules/4gwanbeop.md)을 폴더에 넣고, 평가세트 v0.1의 기대값을 직접 채운 뒤, 2차 수정본으로 품질 점검을 다시 받겠습니다. 그다음 CYS에 명리분석부를 3역할(Master·CSO·Worker)로 세우고, Run 또는 Worker 중 한 경로로 첫 실행을 해서 1단계 '구조 완료'(객관층이 정답 파일과 일치, I-0~I-6 판정 통과)까지 가 보려 합니다.
도움 받은 글 (옵션)
지피터스 24기 'AI 팀 하네스 만들기' 3주차 배포 자료 「나만의 팀 하네스 구축 — 통합 실습 가이드」(INTEGRATED FIELD GUIDE, 2026-10-13 통합판)
1주차 사례글 「JARVIS로 '명리분석부' 만들기」, 2주차 사례글 「손으로 짠 하네스와 절차가 짠 하네스」



한바둑님, 결석 보강을 PLAN.md 적용까지 끌고 가신 게 인상적이에요. 특히 야자시 라운드에서 인터뷰 요약의 「당일 일간 기준」을 강의 자료의 시두법 표와 대조해 「다음 날 일간 기준」으로 바로잡고, 그 결과 시각 미상 때의 시주 후보가 12개가 아니라 13개로 바뀐다는 연쇄까지 짚으신 대목이 좋았어요.
모호도 0.18을 2주차의 0.094와 비교하면서 "미정 8건을 지어내지 않고 남긴 숫자라 오히려 믿을 만하다"고 읽으신 시선도 인상 깊었어요. "인터뷰는 끝났는데 명세가 빠졌다"는 Seed REVISE 0.55 기록은 단계 사이에도 검수가 필요하다는 근거로 다른 분들께도 도움이 될 것 같아요.
다음에 Run까지 가시면 I-3, I-5 결함이 실제로 잡히는지 후기도 기대할게요. 꼬리 탁! 치고 응원하고 갈게요 🐈⬛