LLM의 답변을 그대로 믿었다가 생길 뻔한 혼선 이야기 📖
소개
김태현 스터디장님의 클로드코드 설치 가이드 문서 내용을 살펴보다
일전에 mcp 설정관련 궁금했던 사항을 ChatGPT를 통해 알아보려고 티키타카하다
ChatGPT의 할루시네이션 문제를 만났습니다.
이 과정의 내용을 한번 공유하는게 좋을거 같아 글을 남겨봅니다.
얼마 전 Claude MCP 설정을 공부하다가 재미있는(?) 경험을 했습니다.
AI에게 명령어 사용법을 물어봤는데, 첫 대답은 완전히 반대로 된 설명이었어요. 만약 제가 그냥 넘어가고 다른 사람들에게 그대로 공유했다면, 불필요한 혼란을 퍼뜨렸을 겁니다. 이 글은 그 경험담과 함께 작은 팁을 나누려는 목적이 있습니다.
진행 방법
제가 처음 받은 설명은 다음과 같았습니다:
claude mcp add --transport http notion https://mcp.notion.com/mcp
"이건 시스템 전역에 MCP를 추가하는 거예요" (잘못된 설명)
claude mcp add --scope user --transport http notion https://mcp.notion.com/mcp
"이건 사용자 계정에만 MCP를 추가하는 거예요" (일부만 맞는 설명)
하지만 문서를 확인해보니 실제로는 이렇게 정리됩니다:
--scope옵션을 안 쓰면 👉 local(프로젝트 전용) 으로 추가--scope user를 쓰면 👉 사용자 전역으로 추가
즉, 처음 설명은 정반대였던 셈이죠.
결과와 배운 점
이 경험에서 크게 느낀 건 두 가지입니다:
AI 답변은 확실해 보여도 틀릴 수 있다 🤔
자신감 있게 설명해도 틀린 경우가 있는데, 그게 바로 할루시네이션 현상입니다.그대로 전달했다면 더 큰 혼선을 만들 뻔했다 ⚠️
제가 지적하지 않고 다른 사람에게 전했다면, 다들 잘못된 방식으로 MCP를 등록했을 겁니다.
내가 얻은 작은 팁 ✨
항상 공식 문서와 교차 검증하기: LLM은 아이디어를 얻는 용도로만, 실행 전에 반드시 레퍼런스를 확인하세요.
직접 테스트해보기: 중요한 설정은 실제 실행 후
mcp list같은 명령으로 결과를 검증하는 습관을 들이세요.“확실해 보이는 설명일수록 더 의심하기”: AI가 자신감 있게 말할수록 오히려 더 조심해야 합니다.
도움 받은 글 (옵션)
Claude 공식 문서: MCP 설정 스코프 관련 설명
LLM Hallucination 관련 기사들
