여러 키워드로 크롤링 데이터 요청해보기 (codex ai)

소개

지난번에 하나의 블로그에서 전체 글을 크롤링 하는 것을 시도했었는데요 ~ 이번에는 키워드를 주고 네이버랑 구글 상위에 있는 글을 크롤링 요청 해봤습니다.

목적 ) 키워드 관련 된 블로그를 새롭게 대행 맡았는데 무작정 쓰기 보단 상위에 있는 글감을 토대로 클로드 프로젝트나 gems를 만들어서 작성 해보고 싶었습니다.

진행 방법

간만에 codex ai 출동,,, ㅎ

한국어 텍스트가 포함된 Google 검색 페이지의 스크린샷

너무 대충 지시했더니 블로그 제목이랑 주소만 긁어왔더라구요...

다시 좀 더 구체적으로 요청했습니다.

한국어로 된 Google 검색 페이지의 스크린샷

구글은 막혔다고 하네요...일단 네이버꺼만 받아왔습니다.

글의 내용을 보니 전화번호가 보이는데 전부 지워달라고 할까 하다가 저희가 대행받은 업체 전화번호로 바꿔달라고 요청을 했습니다.

역시 이런건,,,ai가 뚝딱이네요 ㅎㅎ...

나노 바나나도 출동

포스팅에 필요한 그림도 나노 바나나를 통해 좀 얻었습니다. 블로그 글을 주고 추출을 요청했는데 실제 반영을 해서 그림을 추출해준건지 그냥 관련 그림을 추출해준건지는 잘 모르겠네요.

퀄리티는 나쁘지 않았습니다.

한국사이트 스크린샷

결과 및 아쉬운점

여러가지 툴을 오가며 클로드 코드로 글까지 쭉쭉 써보고 싶은데 아직 갈길이 머네요 🫠

담번엔 구글 정보 크롤링에 성공해보고 싶습니다 😅

뉴스레터 무료 구독

👉 이 게시글도 읽어보세요