본문으로 건너뛰기

가장 마음에 드는 모델을 찾은 후기... 그 모델을 입은 Hermes에게 처음 일 시켜본 소감..

스티브신

2026.05.28

가장 마음에 드는 모델을 찾은 후기... 그 모델을 입은 Hermes에게 처음 일 시켜본 소감.. 본문 이미지

소개

지난번 사례글에서 여러 로컬 LLM모델을 가지고 굴려봤습니다만, 굉장히 힘든 시간을 보내게 되었습니다.

Macbook M5 Air 24GB 기준으로 여러 모델을 써봤습니다만.. Gemma 4 E2B 모델로 잠정 결론 내렸습니다

제 PC 기준으로 초기 구동 시에만 Prompt Processing이 이뤄지며, 그 이후에는 대규모 작업이 아니고서는 Prompt Processing 이 일어나지 않아 빠른 답변을 기대할 수 있습니다(일반적인 대화 기준 10초 이내)

한국어 텍스트가 포함된 검은 화면의 스크린샷

그 이후에는 설계해둔 에이전트들을 가지고 제가 자주하는 반복업무를 설명해주고 진행해보게 시켰습니다.

시행착오 — 첫 지시가 두루뭉술해서 에이전트를 손봤다


처음엔 그냥 "AI × 핀테크 시장 좀 조사해줘" 같은 두루뭉술한 지시를 줬더니 결과가 좀 산만했습니다.

문제는 지시가 아니라 에이전트 자체였다. 한 명한테 너무 많은 걸 시키고 있었던 거다. 그래서 에이전트를 손봤다. 한 명을 네 명으로 쪼개고, 각자 역할을 한 가지만 갖게 했다.

- Iris: 조사만 한다. 검증·정리·전략은 하지 않는다.

- Creato: 검증만 한다. 새 정보를 추가하지 않는다.

- Aria: 정리만 한다. 판단하지 않는다.

- Regun: 전략만 짠다. 조사를 다시 하지 않는다.

그리고 중간에 나의 메인 에이전트(Strategy)에게 각 프로세스에 개입시켜 검증하게끔 플로우를 손봤습니다.

원시 정보(Iris) → 신뢰도 분류(Creato) → 구조화 저장(Aria) → 의사결정(Regun). 앞 단계에서 거른 것만 다음 단계로 넘어가도록.

과정 — 4명의 릴레이와 1명의 검증자

1) Iris (조사)

AI × 핀테크 B2C SaaS 스캔, Top 5 아이디어 + 5축 평가(시장성·차별화·구현·수익·규제). 결과는 풍성, 그러나 수치 출처는 흔들렸다.

2) Creato (검증)

Iris의 10개 항목을 ✅확인됨 / ⚠️수정필요 / ❓실시간검색필요 세 단계로 분류.

- Albert "600만 사용자"는 2022년 수치였음 → ⚠️

- 삼쩜삼 매출은 비상장사라 공시 의무 없음, 출처 없음 → 삭제 or "추정" 명시

- 마이데이터 자본금 5억은 신용정보법 시행령으로 확인 → ✅

3) Aria (위키화)

검증된 수치를 Wiki에 ingest. 모든 수치에 "(연도, 출처)" 병기, 미확인 항목은 [PENDING] 태그로 박제. 신규 페이지 3건(마이데이터 요건, 세무사법, 삼쩜삼) 자동 생성.

4) Regun (전략)

Quick Win(2주 내) / 검토 필요(2주 내 결정) / 중장기 모니터링(1~3개월) 세 트랙으로 분류. 1순위 PoC로 'AI 구독 관리 앱' 선정 — 7일 내 사전등록 200건 목표.

핵심 설계 — 에이전트 간 '전달 메모'

이 워크플로우가 매끄럽게 굴러간 가장 큰 이유는 따로 있다. 각 에이전트가 다음 에이전트에게 메모를 남긴다는 규칙.

Iris는 마지막에 "Creato에게 전달 메모: 이 수치들은 검증 필요"라고 적었다. Creato는 "Aria에게 전달 메모: 이 항목은 [PENDING] 태그 부착"이라고 적었다. Aria는 "Regun에게 전달 메모: 규제 장벽이 해자다, 전략 분석 시 참고"라고 적었다.

손에서 손으로 넘기는 릴레이 바통처럼, 직전 에이전트가 다음 에이전트에게 "여기 주의해서 봐야 함"이라고 짚어주는 구조. 이게 없었다면 다음 에이전트는 앞 결과를 처음부터 다시 해석해야 했을 것이다.

한 단 더 — Hermes에게 단계 별 검증하도록

실무 릴레이(Iris→Creato→Aria→Regun)가 굴러가는 동안, 나는 옆에서 계속 판단을 내려야 했다. 어떤 아이디어를 우선할지, 어디서 멈춰야 할지, 무엇을 물어볼지.

그래서 메인 에이전트에게 해당 업무를 부여했다. 이름은 Strategy. "1인 제품 개발자 옆에서 기획+전략 파트너 역할을 하는 에이전트." 아이디어 좁히기 → PRD → MVP → 시장 스캔 → 비즈니스 모델 → GTM → 메시지까지, 의사결정 분기마다 함께 고민하는 역할이다.

한국어 프로그램 스크린샷

결과

한국어 단어가 적힌 검은 화면

배운 점

- 영혼과 절차는 분리해서 준다. "이 에이전트는 누구인가(SOUL)"와 "이 에이전트는 어떻게 일하는가(AGENTS)"는 다른 질문이다. 두 질문의 답을 같은 문서에 섞으면 둘 다 흐려진다. 불변하는 것과 진화하는 것을 같이 두지 말 것.

- 두루뭉술한 지시는 에이전트 잘못이 아니라 설계 잘못이다. 한 명한테 너무 많은 걸 시키면 어떤 지시도 두루뭉술해진다. 역할을 좁히면 지시도 좁아진다.

- 조사와 검증을 같은 AI가 하면 안 된다. 자기 글을 자기가 검토하면 자기 결론에 유리하게 흘러간다. Creato는 Iris 결과만 받아서 의심부터 한다.

- 전달 메모가 워크플로우를 살린다. 에이전트끼리 직접 대화하지 않아도, 다음 사람에게 남기는 짧은 메모 한 줄과 검증 후 전달하는 과정 단계가 품질을 결정한다.

1

함께 이야기해요 1

로그인하고 댓글을 남겨 주세요

자연어회계처리 프로필 이미지

오오 매매 시나리오까지 가실수도있겟네요.

여기에 n8n을 붙인다면?? 이라는 생각이들었습니다. 좋은 영감을 받았습니다 ㅎㅎ

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기