본문으로 건너뛰기

99.25점에서 멈췄습니다 — 마지막 1점을 포기한 이유

99.25점에서 멈췄습니다 — 마지막 1점을 포기한 이유 본문 이미지

📝 지난 글 이후

지난 글에서는 판정 4건이 틀렸던 이야기를 썼습니다. (1편 보기) 그 오채점들을 정정하고 구조 개선을 붙여 89.0점(M4)으로 보드에 게재됐고, 글 끝에는 "남은 항목은 시간이 쌓여야 하니 몇 달 뒤에 재평가"라고 적어뒀습니다.

AKM Index는 5개 필러 × 5기준 = 25기준을 레벨 0~4로 채점해 100점을 매기는 프레임워크입니다. 프레임워크 소개는 지난 글에 있으니 여기서는 넘어가겠습니다.

예상보다 빨리 3회차를 돌렸습니다. 결과는 99.25점(M4)입니다. 25기준 중 24개가 레벨 4이고, 남은 하나만 3입니다. 이 글은 그 하나를 왜 3으로 남겼는지에 대한 이야기입니다.

AKM Index 3회차 결과 — 99.3점 M4, 그리고 76.5 → 89.0 → 99.3 성장 궤적

🧭 1 — 천장의 위치부터 계산했습니다

시작은 점수 목표가 아니라 산술이었습니다. 89.0점 기준선에서 감점 사유 문구를 전부 뽑아 기준마다 배점을 붙여봤습니다. 필러별로 가중치가 다르기 때문에 "이걸 다 올리면 몇 점인가"가 계산됩니다. 제가 개선할수 있다 판단하고 개선되면 가능한 숫자가 98.5였습니다.

이건 목표가 아니라 천장의 위치입니다. 천장을 먼저 알아두면 어디까지가 노력의 영역이고 어디부터는 아무리 해도 안 되는 영역인지가 갈립니다. 이 천장이 저의 AKM 시스템의 목표지향점이자 TO BE값이 되는것입니다. 그렇다면 이 값을 맞출 수 있는 로직과 그게 실제로 돌아가는지에 대한 검증이 필요한 셈이지요.

실제로는 루브릭이 v1.1로 개정돼 있어서 앵커 문언을 다시 대조해야 했고, 재대조 결과 98.5보다 조금 위인 99.25까지 갔습니다.

설계에서 제일 중요했던 건 남아 있던 레벨 3 기준 11개를 성격별로 넷으로 나눈 일입니다. ①감점 사유 자체가 이미 사실과 다른 것 ②구조는 있는데 측정만 안 해본 것 ③시간이 쌓여 이미 풀려 있는 것 ④정말로 새로 만들어야 하는 것. 처방이 완전히 다르기 때문에 섞어놓으면 순서를 못 정합니다.

실제로 올라간 10건의 성격은 이렇게 나뉩니다.

성격

건수

무슨 일이었나

오채점 정정

4건

이미 있던 자산이 누락되거나 잘못 판정돼 있었음

당일 측정

4건

인프라는 돌고 있는데 수치를 재본 적이 없었음

소급 문서화

2건

이미 일어난 일을 뒤늦게 세어 기록한 것

시간이 해결

1건

이력이 쌓여 저절로 조건이 충족됨

없던 것을 새로 만들어서 올린 건 하나도 없습니다. 점수가 낮았던 이유는 자산이 없어서가 아니라 자산을 증명할 문장이 없어서인 경우가 많았습니다.

저말고도 AKM을 해보신 분들은 해당 채점기를 실행 했을 시에 오채점 정정이 있는데 놓치는 경우가 많으실겁니다. 꼭체크하셔서 반복수행해보시기 바랍니다.

⚖️ 2 — 점수와 맞바꾼 것들

저는 하네스를 꽉 잡는다고 좋은 게 아니라고 생각합니다. 두 지표가 서로 상충할 때 한쪽을 100으로 밀어붙이는 건 최적이 아니고, 다른 쪽을 얼마나 내주고 살 것인지 고르는 쪽이 실력에 가깝습니다. 그래서 하네스에 있어서 파레토 최적을 유지해야한다고 주장합니다. 이번 회차는 그 선택이 네 번 있었습니다.

점수와 정직성. 지난 회차에는 검색 성능이 낮게 나온 것을 낮은 그대로 공개하고 해당 기준을 3에 묶어뒀습니다. 이번에 그 기준을 4로 올렸는데, 올리면서도 "수치는 여전히 낮고 재랭커 도입이 다음 과제"라는 문장을 같이 넣었습니다. 올린 근거는 절대값이 좋아졌기 때문이 아니라 측정에서 구성 개정까지의 기록이 생겼기 때문입니다. 단 이 측정의 기록이 정합성을 갖추고 반속으로 구성된 M4복리형으로 기록측정이 가능한 인정 받을 수 있는 시스템인 것인가가 중요한 관건입니다.

점수와 통제 가능성. 마지막에 남은 기준은 제가 무엇을 해도 남이 반응해주지 않으면 채워지지 않습니다. 통제 밖에 있는 지표를 만점까지 밀어보려는 시도는 대개 조작으로 끝납니다. 하지만 그래서 3으로 남겼습니다. 단 이 통제 밖의 지표는 시간이 해결해 줄 수 있는 시스템을 구축해 놓아야합니다. 그렇다면 cron으로 시스템결과물을 책정해두고 우리는 해당 자료를 통해 내 옵시디언의 RAG에 적용되는 기록까지의 프로세스를 만들어 두면 됩니다. 그럼 시간이 지나면 해결될 것입니다.

속도와 숙성. 구교주님의 프레임워크에는 평가 직전에 급히 만든 산출물을 인정하지 않는 조항이 있습니다. 그래서 당일에 해도 되는 '측정'과 시간이 필요한 '축적'을 갈랐습니다. 측정 4건만 그날 태우고 나머지는 다음 회차로 넘겼습니다. 단 당일에 해도 되는 측정은 그간 우리가 루프를 통해 돌린기록이 있는 것들로 제한될 것입니다. 단지 그간 돌아갔으나 기록이 없어 판정을 못받았던 것이지요... 새로 프로세스를 구축하여 돌린것은 인정되지 않을것입니다.

정밀함과 뭉뚱그림. 불리한 쪽으로 뭉뚱그린 표현도 부정확입니다. 유리한 과장만 부정직인 게 아닙니다. "0건"이라고 적어두면 채점자에게는 그냥 실패로 읽힙니다. 이거는 과거 llm에게 질문할대 이용자가 원하는 니즈를 확인하고 틀린답이라도 대답해주는 할루시네이션과 비슷한 효과입니다. 유리한 과장 요 포인트는 내가 틀린 주장, 틀린값이 있어도 유리하게 나오지 않고 객관적인것을 필요로 하며 그것을 통해 개선되는 루프와 객관적인 판정을 할 수 있는 검침이 필요하다라는 것입니다.

아래가 최종 히트맵입니다. 25칸 중 24칸이 진한 초록(레벨 4)이고, 오른쪽 맨 아래 X5 한 칸만 회색 3으로 남아 있습니다. 이 한 칸이 위에서 말한 "통제 밖 지표"입니다.

🕵️ 3 — 제출 직전에 세 번 끼어들었고, 세 번 다 틀렸습니다

AKM index를 실행하기 직전에 akm index를 하면서 교주님 코멘트와 히트맵 항복에 따른 간이 index 주간 cron 보고서스킬을 만들게 해놨었습니다. 해당 자료가 쌓인 3개를 열어봤습니다. 세 번 다 오류가 나왔습니다. 공통점이 있었는데, 감점 사유가 틀린 게 아니라 우리가 쓴 문장이 틀린 경우였습니다.

자기모순. 검색 성능면에서 같은 리포트의 요약란과 진단란은 여전히 "3으로 유지"라고 말하고 있었습니다. 판정만 고치고 그 판정을 인용하는 다른 칸들은 그대로 둔 겁니다. 채점자가 먼저 발견했다면 조정 내역 전체의 신뢰도가 흔들렸을 겁니다. 그러면 점수를 깍았을 겁니다.

숫자 라벨과 항목의 불일치. "주간 자동 점검 5종"이라고 써놓고 괄호 안에는 6개를 늘어놨습니다. 그리고 그 6개 중 하나는 실재하지 않는 점검이었습니다. 두 회차 전부터 있던 오류였고, 직전 운영자 코멘트가 그 문구를 그대로 인용하고 있었습니다. 통과된 게 아니라 아직 안 걸렸을 뿐이었습니다. 그래서 바로 이건 고쳐버렸습니다.

정상 작동을 결함으로 보고할 뻔했습니다. 이게 제일 위험했습니다. 주간 점검 6종에 대해 "사이클 0건"이라고 적어뒀는데, 산출물을 실제로 열어보니 4종은 출력이 비어 있었습니다. 그 시스템에서 빈 출력은 "위반 없음, 클린 통과"라는 신호입니다. 나머지 2종은 각각 1건과 2건을 검출했고, 한쪽은 다음날 조치까지 끝나 있었습니다. 평가를 하게되면 해당내용은 기록없음으로 잡힙니다. 실제로 위반이없는것인데 말이죠..... 개수만 세면 정상 작동한 안전장치가 "기록 없음"으로 보고됩니다.

한 가지가 더 있었습니다. 직전 리포트에 배포 자산을 "공개 릴리즈"라고 적어뒀는데 실측해보니 그 시점에는 비공개였습니다.... 이거는 제가 더이상 그거 배포안할라고 비공개로 돌려놨는데 그게 문제가 되었던것입니다. 자진 정정하고 실제로 공개로 전환했습니다. 여기서 얻은 규칙은 하나입니다. 감점 사유만 검증하면 놓칩니다. 내가 나에게 유리하게 주장한 사실도 검증 대상입니다.

✅ 4 — 채점자가 남긴 말, 그리고 99.25

직전 회차에 운영자는 "9월까지 주간 감사를 2사이클 쌓아 오라"는 조건을 걸어뒀습니다. 이번 리포트는 그 조건에 "충족했습니다"가 아니라 "아직 못 채웠습니다"를 먼저 밝히는 방식으로 답했습니다. 지목된 6종은 첫 가동이라 1회씩만 돌았기 때문에 완결 사이클 집계에서 스스로 뺐고, 대신 27일 연속 돌아간 야간 점검과 주간 약점 채굴을 상향 근거로 옮겼습니다. 아직 못 채웠지만 1사이클 돌아간것이 이게 되는것임을 증명이 되서 점수가 올라간것으로 보입니다.

게재된 리포트에 구요한 교주님의 코멘터리가 붙었습니다. 신뢰의 근거로 집힌 것이 세 가지였는데, ⓐ"공개"라고 적은 것이 실제로는 비공개였다는 자진 정정, ⓑ외부 반응이 0이라 마지막 기준을 3에 묶어둔 판단, ⓒ검색 성능을 0.20에서 0.52로 올려놓고 "여전히 낮다"까지 함께 적은 것이었습니다. 1에 가까울수는 없으며 옵시디언의 검색 성능에서 현재 최적의 파레토 이기때문에 해당 수치로 해놨으나 저의 기준점에선 아직 파레토 최적이지 않기 때문에 여전히 낮은 상태인것입니다.

남아 있는 벽은 내부 노력으로 넘을 수 있는 종류가 아니고, 외부 채택자의 기여가 실제 개정으로 들어오는 순간을 보고 싶다.

보드에 게재된 운영자 코멘터리

세어보니 이번 회차에 점수를 깎는 쪽으로 판단한 것이 정확히 세 번이었습니다. 그리고 채점자가 신뢰의 근거로 집은 것이 그 세 개였습니다. 내준 쪽이 그대로 얻은 것이 되어 돌아왔습니다.

시점

총점

밴드

요지

1차

76.5

M3

오채점 정정 + 당일 가능한 구조 개선

2차

89.0

M4

사고 기록·주간 점검·원격 백업·검색 성능 측정

3차

99.25

M4

상향 10건, 24기준 레벨 4 / 1기준은 3 유지

마지막 1개를 3으로 남긴 이유를 조금 더 적자면, 그 기준의 만점 조건은 "외부 채택자의 피드백이 실제 개정으로 이어진 기록"입니다. 공개해둔 자산 두 곳 모두 이슈와 PR, 포크가 0이라 아직 그런 기록이 없습니다. 억지로 만들지 않고 3으로 남겼습니다. 그래서 99.25이고 100이 아닙니다.

💬 배운 것

가장 자주 틀리는 건 판정이 아니라 판정을 설명하는 문장입니다. 판정 하나를 올리면 그 판정을 인용하는 칸이 최소 두세 개는 같이 썩습니다. 그래서 점수를 고친 뒤에 리포트를 처음부터 한 번 더 읽는 절차가 따로 필요했습니다. 그러다 보니 평소 돌리는 옵시디언을 간이 리포트 할 수 있는 스킬을 만들게 되었던 것입니다.

그리고 한 칸을 남겨두는 것에 대해서도 생각이 정리됐습니다. 25개 중 하나를 3으로 남긴 건 겸손이 아니라 계산입니다. 그 항목은 제 노력으로 채울 수 없고, 억지로 채우면 조작이 됩니다. 꽉 잡는다고 좋은 게 아니라는 말을 점수로 확인한 회차였습니다.

🚀 앞으로

4회차는 9월입니다. 남은 항목은 전부 시간이 쌓여야 풀리는 것들이라 서둘러서 될 일이 없습니다.

대신 깎일 후보를 미리 적어뒀습니다. 스스로 "상한·하한"이라고 밝혀둔 측정 2건, 여전히 낮은 검색 성능, 기간이 짧은 이력 1건입니다. 깎여도 95~97점 착지로 봅니다. 어디가 깎이는지가 다음 회차의 재료이고 다음회차까지의 누적항목에 따라 100이 될 것인가가 특이점일거 같습니다.

4

함께 이야기해요 4

로그인하고 댓글을 남겨 주세요

꾸
꾸기작2026.08.06

이 글을 읽으면서 놀라웠던 부분은 천장 계산부터 시작했다는 것입니다. 대부분 점수를 올리려고 목표를 먼저 정하지만, 저자는 산술적으로 가능한 최대값을 계산하고 거기서부터 역으로 작업을 설계했다는 점이 정말 인상 깊었습니다. 이런 접근은 단순한 개선이 아니라 시스템을 제대로 이해하고 있다는 증거입니다.

25기준 중 24개를 레벨 4로 올리는 과정에서 네 번의 선택이 있었다는 부분도 공감합니다. 점수와 정직성, 점수와 통제 가능성, 속도와 숙성, 정밀함과 뭉뚱그림—이 모든 것이 파레토 최적을 지향하는 경제학적 사고입니다. 특히 검색 성능을 0.52로 올리면서도 '여전히 낮다'고 명시한 부분은 절대값이 아니라 자신의 목표지점을 기준으로 판단한다는 의지를 보여줍니다.

마지막 1점을 남긴 이유가 정말 좋습니다. '외부 채택자의 피드백이 실제 개정으로 이어진 기록'이 만점 조건인데, 이슈와 PR이 0이라고 해서 억지로 만들지 않은 것이죠. 이것은 겸손이 아니라, 저자가 말한 대로 계산입니다. 통제 밖의 지표를 조작으로 채우지 않겠다는 철학이 담겨 있으며, 대신 시간이 해결해주는 시스템을 구축해 둔다는 접근은 진정한 장기 전략이라고 봅니다.

제출 직전 세 번의 자진 정정 이야기도 인상 깊었습니다. 판정이 아닌 판정을 설명하는 문장이 가장 자주 틀린다는 깨달음, 유리한 것도 검증해야 한다는 원칙, 정상 작동을 결함으로 보고하지 않기 위해 처음부터 한 번 더 읽는 절차—이 모든 것이 AKM 프레임워크를 제대로 운영하는 사람의 특징입니다. 99.25점이 100점보다 더 가치 있어 보이는 이유가 여기에 있는 것 같습니다. 응원하겠습니다!

DECK 프로필 이미지
DECK2026.08.06

99.25점보다 외부 사용자의 피드백이 없다는 이유로 마지막 한 기준을 레벨 3에 남긴 선택이 더 기억에 남습니다.

증거가 없으면 억지로 닫지 않고 HOLD로 두는 태도라 저도 많이 공감했습니다.

25개 기준 중 24개를 레벨 4까지 올리고도 멈춘 선택이라 더 설득력이 있었고요.

마지막 기준이 실제 외부 피드백으로 채워지는 순간이 이 기록의 다음 장이 되겠네요.

_묘랑 프로필 이미지
_묘랑2026.08.05

마지막 1점을 포기했다는 것에서 인간미가 느껴져요 ㅎㅎㅎㅎ
99.25점이라니.. 이미 넘사벽이십니다! 👍

뽀짝이 프로필 이미지
뽀짝이2026.07.31

76.5 → 89.0 → 99.25 궤적이 수치 변화가 아니라 분석 방법 자체가 달라지는 과정이라는 게 인상 깊었습니다. 특히 상향 10건의 성격을 오채점 정정·당일 측정·소급 문서화·시간이 해결로 나눠서 보니, "없던 걸 만든 게 아니라 있던 걸 증명하지 못했던 것"이라는 말이 더 또렷하게 와닿았어요.

마지막 1칸을 3으로 남기는 게 겸손이 아니라 계산이라는 부분도 좋았습니다. 통제 밖의 지표를 억지로 채우면 조작이 된다는 기준을 끝까지 지킨 셈이고, "내준 쪽이 그대로 얻은 것이 되어 돌아왔다"는 결론이 이 회차 전체를 단적으로 말해주는 것 같아요.

꼬리 탁! 치고 응원하고 갑니다 🐈‍⬛

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기