본문으로 건너뛰기

23기 런칭스프린트 4주차 수강후기

23기 런칭스프린트 4주차 수강후기 본문 이미지

23기 런칭스프린트 4주차 후기] 농사다마, 검색엔진을 넘어 생성형 AI가 읽을 수 있는 웹앱 만들기

소개

시도하고자 했던 것과 그 이유를 알려주세요.

지난 주에는 농사다마에 카카오맵 API를 연결하고, 공식 도메인 nongsadama.app을 적용한 뒤 Google Search Console 등록과 기본적인 SEO 작업까지 진행했다.

이번 4주차에는 여기서 한 단계 더 나아가 ChatGPT나 Claude 같은 생성형 AI가 농사다마의 정보를 검색하고 이해할 수 있도록 GEO(Generative Engine Optimization)를 적용해보는 것​을 목표로 했다.

농사다마는 농촌 외국인 근로자를 대상으로 병원·마트·행정기관 같은 지역 생활정보를 제공하는 서비스다. 앞으로 사용자가 반드시 농사다마 사이트에 직접 접속해서 정보를 검색하는 것뿐만 아니라,

“외국인 근로자가 임금 문제를 상담하려면 어디에 전화해야 해?”

“한국에서 비자 관련 상담을 어디에서 받을 수 있어?”

같은 질문을 ChatGPT나 Claude에 했을 때 농사다마의 정보가 검색되거나 참고될 수 있는 환경도 중요하다고 생각했다.

그래서 기존의 Google·네이버 중심 SEO에서 생성형 AI 검색을 고려한 GEO까지 확장해보기로 했다.

이번 작업에서 특히 확인하고 싶었던 것은 다음 세 가지였다.

  • ChatGPT와 Claude의 웹 크롤러가 현재 농사다마에 접근할 수 있는지

  • React 기반 웹앱의 콘텐츠를 AI가 실제로 읽을 수 있는지

  • 검색 노출을 허용하면서도 사용자 게시글까지 AI 학습 데이터로 사용되지 않도록 구분할 수 있는지


진행 방법

어떤 도구를 사용했고, 어떻게 활용하셨나요?

이번 주 역시 대부분의 작업은 Claude Code를 활용했다.

다만 바로 코드를 수정하게 하기보다 먼저 OpenAI와 Anthropic의 공식 문서를 읽고, 현재 농사다마의 구조를 직접 진단한 뒤 GEO 전략을 제안하도록 요청했다.

참고한 문서는 다음 두 가지였다.

  • Anthropic Claude 크롤러 관련 문서

  • OpenAI 웹 크롤러 및 봇 관련 문서

Claude Code가 해당 문서를 확인한 뒤 nongsadama.app에 여러 AI 크롤러 User-Agent로 직접 접근해 현재 상태를 점검하도록 했다.

1️⃣ 먼저 GEO 적용 전 현재 상태 진단

처음에는 단순히 robots.txt에 AI 크롤러를 허용하면 GEO가 되는 것이라고 생각했다.

하지만 Claude Code에게 실제 사이트를 점검하도록 하니 예상과 다른 문제가 발견됐다.

사용한 프롬프트는 다음과 같다.

블로그/콘텐츠 미디어 분야 웹사이트를 AI의 생성 엔진에
최적화(GEO)하려고 해.

다음 링크를 참고해서 우리 사이트에 반영할 부분을
전략적으로 제시해줘.

추가로 문서에 없는 GEO 관련 팁이 있다면 전략에 포함해줘.

앤트로픽:
privacy.claude.com/en/articles/8896518

오픈AI:
developers.openai.com/api/docs/bots

우리 서비스의 공식 도메인은
https://nongsadama.app 이야.

공식 문서를 먼저 확인한 뒤,
현재 사이트에서 AI 크롤러 접근이 가능한지도 직접 진단하고
우선순위별 개선 전략을 제안해줘.

진단 결과 AI 크롤러 자체가 사이트에 접근하지 못하는 것은 아니었다.

GPTBot, OAI-SearchBot, ClaudeBot, Claude-SearchBot 등의 접근 테스트는 정상적으로 이뤄졌다.

문제는 다른 곳에 있었다.

농사다마는 React 기반 CSR(Client Side Rendering) 웹앱이기 때문에 브라우저에서는 JavaScript가 실행된 뒤 생활정보나 게시글 내용이 화면에 표시되지만, JavaScript를 충분히 렌더링하지 않는 크롤러에게는 실제 본문이 거의 보이지 않을 수 있었다.

즉,

“AI가 사이트에 들어오지 못하는 것”보다 “들어와도 읽을 콘텐츠가 충분하지 않은 것”이 더 큰 문제였다.

이 부분이 이번 GEO 작업에서 가장 크게 배운 점이었다.


2️⃣ AI 검색은 허용하고, 사용자 게시글 학습은 제한

두 번째로 고민한 부분은 AI 크롤러를 모두 허용하는 것이 정말 좋은가 하는 점이었다.

농사다마에는 향후 외국인 근로자가 직접 작성하는 커뮤니티 게시글이 포함될 예정이다.

생활정보처럼 공개를 목적으로 하는 정보는 AI 검색을 통해 노출되어도 문제가 적지만, 사용자가 직접 작성한 게시글까지 AI 모델 학습 목적으로 수집되는 것은 별도의 문제라고 판단했다.

Claude Code의 제안은 “검색·인용은 허용하되 학습 목적 크롤러는 게시판에서 제한한다”​는 방식이었다.

예를 들면 다음과 같은 구조다.

User-agent: GPTBot
Disallow: /board

User-agent: ClaudeBot
Disallow: /board

반면 검색이나 사용자 요청에 따라 페이지에 접근하는 봇은 허용하는 방향으로 설계했다.

Claude Code가 제안한 전략을 검토한 뒤 다음과 같이 지시했다.

차단으로 승인.

다음 1~3번을 실제 서비스에 적용해줘.

1. robots.txt에 AI 검색 및 인용 목적의 봇 접근은
   명시적으로 허용한다.

2. GPTBot과 ClaudeBot 등 학습 목적의 봇은
   /board 경로 접근을 차단한다.

3. llms.txt와 FAQPage JSON-LD를 추가한다.

사용자 게시판은 AI 검색을 위한 접근과
모델 학습을 위한 접근을 가능한 범위에서 구분해서 설정해줘.

적용 후 빌드하고 배포한 뒤
https://nongsadama.app 에서 실제 파일이 정상적으로
서빙되는지도 확인해줘.

결과적으로 검색·인용을 위한 접근은 열어두고, 게시판에 대해서는 GPTBot·ClaudeBot 등의 학습 목적 접근을 제한하는 정책을 적용했다.

활용 이미지 추천 2
robots.txt에서 OAI-SearchBot, Claude-SearchBot과 GPTBot 등의 정책이 나뉘어 있는 화면


3️⃣ llms.txt를 만들어 AI가 읽을 수 있는 정적 정보 제공

이번 주에 처음 알게 된 개념 중 하나가 **llms.txt**였다.

현재 농사다마는 CSR 방식이기 때문에 실제 생활정보가 JavaScript 실행 이후 나타난다.

그래서 AI가 사이트의 핵심 내용을 쉽게 파악할 수 있도록 서비스 정보를 정적인 텍스트 파일로 별도 제공하는 방식을 적용해봤다.

llms.txt에는 다음과 같은 내용을 담았다.

  • 농사다마가 어떤 서비스인지

  • 누구를 대상으로 하는지

  • 주요 기능

  • 외국인 근로자에게 필요한 생활정보

  • 주요 공공기관 상담번호

  • 개인정보 및 사용자 게시글 보호 원칙

적용 후에는 다음 주소에서 파일이 실제로 제공되는 것도 확인했다.

https://nongsadama.app/llms.txt

농사다마처럼 화면 대부분이 JavaScript로 렌더링되는 서비스에서는 단순히 크롤러 접근을 허용하는 것뿐만 아니라 AI가 읽을 수 있는 정적 콘텐츠를 별도로 준비하는 작업도 필요하다는 점을 알게 됐다.

활용 이미지 추천 3
브라우저에서 https://nongsadama.app/llms.txt를 직접 열어본 화면


4️⃣ FAQPage JSON-LD 구조화 데이터 추가

기존 농사다마에는 서비스 자체를 설명하기 위한 WebApplication 구조화 데이터가 일부 적용되어 있었다.

이번에는 생활정보를 AI와 검색엔진이 조금 더 명확하게 이해할 수 있도록 FAQPage 형태의 JSON-LD를 추가했다.

예를 들어 농사다마에는 다음과 같은 정보가 있다.

  • 임금·근로 상담 → 1350

  • 출입국·비자 상담 → 1345

  • 긴급 상황 → 112

  • 여성긴급전화 → 1577-1366

처음에는 이런 번호들을 모두 ContactPoint에 넣는 방식도 검토했다.

하지만 그렇게 하면 해당 번호가 마치 농사다마 운영자의 공식 연락처인 것처럼 잘못 해석될 가능성이 있다는 문제가 있었다.

그래서 다음처럼 FAQ의 질문과 답변에 실제 의미를 명확하게 적는 방식으로 수정했다.

Q. 임금이나 근로 문제는 어디에 상담할 수 있나요?
A. 고용노동부 고객상담센터 1350에서 상담할 수 있습니다.

Q. 비자나 체류 문제는 어디에 문의할 수 있나요?
A. 외국인종합안내센터 1345에서 상담할 수 있습니다.

이번 과정에서 구조화 데이터를 많이 넣는 것이 중요한 것이 아니라, AI와 검색엔진이 정보를 잘못 이해하지 않도록 실제 의미에 맞는 구조를 사용하는 것이 더 중요하다는 점도 알게 되었다.

활용 이미지 추천 4
Claude Code가 FAQPage JSON-LD를 구현한 코드 또는 검증 결과 화면


5️⃣ 적용 후 실제 서비스에서 다시 검증

Claude Code에는 코드를 수정하는 것에서 끝내지 않고 항상 실제 서비스까지 확인하도록 요청했다.

적용 후 확인한 항목은 다음과 같다.

https://nongsadama.app/robots.txt
https://nongsadama.app/llms.txt
https://nongsadama.app/sitemap.xml

Claude Code에서 파일 생성 → 코드 수정 → 빌드 → Git Push → 배포 → 공식 도메인 확인 순으로 작업을 진행했다.

이번에도 지난주에 배운 Claude Code 활용 방식이 도움이 됐다.

단순히

GEO 적용해줘.

라고 요청하기보다,

공식 문서 확인
→ 현재 서비스 진단
→ 개선안 제안
→ 내가 정책 결정
→ 코드 적용
→ 빌드
→ 배포
→ 공식 도메인에서 재검증

까지 작업 흐름을 지정해주는 방식이 훨씬 안정적이었다.


결과와 배운 점

배운 점과 나만의 꿀팁을 알려주세요.

이번 주에 가장 크게 배운 것은 SEO와 GEO가 완전히 같은 작업은 아니라는 점이었다.

기존 SEO 작업에서는 주로 다음과 같은 내용을 다뤘다.

  • <title>

  • meta description

  • sitemap.xml

  • robots.txt

  • canonical

  • Open Graph

  • Google Search Console

반면 GEO를 고민하면서는 새로운 질문이 생겼다.

“AI가 우리 사이트에 접근할 수 있는가?”

그리고 그보다 더 중요한 질문은

“AI가 접근했을 때 실제로 이해할 수 있는 정보가 있는가?”

였다.

농사다마는 CSR 웹앱이라 사람이 브라우저로 보면 콘텐츠가 잘 보이지만 AI 크롤러 입장에서는 그렇지 않을 수 있다는 점이 특히 흥미로웠다.

나만의 Claude Code 활용 꿀팁

이번에도 가장 효과적이었던 방식은 Claude에게 바로 구현시키지 않고 먼저 진단과 전략을 요청하는 것이었다.

예를 들어,

GEO 적용해줘.

라고 바로 요청하는 대신,

1. 공식 문서를 확인하고
2. 현재 우리 사이트를 직접 진단하고
3. 문제를 설명하고
4. 개선안을 우선순위별로 제시하고
5. 개인정보와 서비스 정책상 내가 결정해야 할 부분은
   먼저 질문해줘.

라고 요청했다.

그 결과 Claude가 바로 코드를 변경하지 않고,

“사용자 게시글까지 AI 학습을 허용할 것인가?”

라는 정책적 선택지를 먼저 제시했다.

개발 작업 중에는 AI에게 모든 판단을 넘기기보다 기술적인 선택과 서비스 운영 정책을 구분해 사람이 승인해야 하는 부분을 남겨두는 것이 중요하다는 것도 배웠다.


과정 중에 어떤 시행착오를 겪었나요?

처음에는 AI 크롤러가 사이트에 접근할 수 있도록 robots.txt만 수정하면 GEO가 어느 정도 해결될 것이라고 생각했다.

하지만 실제 진단 결과 농사다마의 가장 큰 문제는 접근 차단이 아니라 CSR 구조로 인해 AI가 읽을 수 있는 본문 콘텐츠가 부족한 것이었다.

llms.txt와 FAQ 구조화 데이터를 추가해 일부 보완했지만 이것은 근본적인 해결책은 아니다.

생활정보 페이지 자체를 HTML로 미리 만들어주는 프리렌더링이나 SSR 방식이 적용된다면 검색엔진과 AI 모두 더 쉽게 콘텐츠를 읽을 수 있을 것으로 보고 있다.

또 하나의 시행착오는 모든 공공기관 전화번호를 ContactPoint 구조화 데이터에 넣으려고 했던 것이다.

Claude Code가 이를 검토하면서 해당 번호가 농사다마의 연락처가 아니라 외부 공공기관의 상담 번호라는 사실을 잘못 표현하게 될 수 있다고 알려줬고, 최종적으로 FAQ 답변 안에 사실관계를 명확하게 넣는 방법을 선택했다.

이번 과정에서 AI가 제안한 구현 방법도 실제 의미가 맞는지 사람이 한 번 더 확인해야 한다는 점을 느꼈다.


도움이 필요한 부분이 있나요?

현재는 GEO의 기본적인 기술 설정까지 적용해본 상태이지만, 실제로 생성형 AI에서 농사다마의 정보가 얼마나 검색되고 활용되는지를 확인할 방법에 대한 피드백을 받고 싶다.

특히 다음 부분이 궁금하다.

  • GEO의 효과를 측정할 수 있는 현실적인 KPI가 무엇인지

  • ChatGPT나 Claude에서 특정 서비스가 검색되거나 인용되는 정도를 어떻게 모니터링할 수 있는지

  • llms.txt 외에 초기 서비스가 적용해볼 만한 GEO 방법은 무엇인지

  • CSR 웹앱에서 프리렌더링이나 SSR을 어느 시점에 도입하는 것이 적절한지

  • 생활정보와 사용자 게시글의 AI 접근 권한을 어떻게 구분하는 것이 적절한지

아직 GEO 자체가 빠르게 변화하고 있는 분야이다 보니, 실제 적용 사례를 경험한 분들의 의견을 들어보고 싶다.


앞으로의 계획이 있다면 들려주세요.

다음 단계에서는 현재 적용한 GEO 설정에 더해 생활정보 콘텐츠 자체를 AI와 검색엔진이 읽기 좋은 구조로 만드는 작업을 진행할 계획이다.

현재 가장 큰 과제로 남아 있는 것은 생활정보 페이지 프리렌더링이다.

React에서 JavaScript를 실행해야만 볼 수 있는 내용을 정적인 HTML 형태로 제공하면 네이버 SEO와 생성형 AI 접근성을 동시에 개선할 수 있을 것으로 보고 있다.

또한 향후에는 다음 작업도 진행할 예정이다.

  • Bing Webmaster Tools 등 추가 검색 채널 등록

  • IndexNow 적용 검토

  • 생활정보 콘텐츠의 최종 확인일(verified_at) 노출

  • 실제 외국인 근로자 인터뷰를 통한 생활정보 콘텐츠 보완

  • 지자체·외국인지원기관 등 외부 사이트에서 농사다마가 소개될 수 있는 방법 탐색

  • ChatGPT·Claude에서 농사다마 관련 질문을 직접 테스트하며 검색·인용 여부 확인

결국 목표는 단순히 검색 결과 상단에 노출되는 것이 아니라,

외국인 근로자가 필요한 정보를 찾는 순간 농사다마의 정보가 검색엔진과 생성형 AI 모두에서 신뢰할 수 있는 정보로 활용될 수 있도록 만드는 것이다.


도움 받은 글 (옵션)

이번 주에는 기존 지피터스 스터디에서 배운 Claude Code 활용 방법과 함께 다음 외부 자료를 참고했다.

  • OpenAI 웹 크롤러 및 봇 관련 공식 문서

  • Anthropic Claude 크롤러 및 개인정보 관련 공식 문서

  • 지난주에 적용한 Google Search Console 및 SEO 설정

  • Claude Code를 활용한 실제 robots.txt, llms.txt, JSON-LD 구현 및 배포 검증

특히 이번 주에는 단순히 Claude에게 코드를 작성시키는 것을 넘어, 공식 자료 조사 → 사이트 진단 → 전략 제안 → 사람의 정책 결정 → 구현 → 실제 서비스 검증까지 하나의 작업 흐름으로 활용해봤다는 점이 가장 의미 있었다.

함께 이야기해요 0

로그인하고 댓글을 남겨 주세요

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기