본문으로 건너뛰기

레딧 게시글 가져와 구글시트에 저장하기

아이젠

2025.05.21

레딧 게시글 가져와 구글시트에 저장하기 본문 이미지

소개

레딧에 뉴스 게시글의 정보를 가져오고 상세페이지 내용을 크롤링하여 openai를 통한 요약 정보를 저장

진행 방법

어떤 도구를 사용했고, 어떻게 활용하셨나요?

  1. n8n 사용

  2. 16기 스터디장 세현, 인준님이 운영하는 NextNode 사이트에 워크플로우를 정의하고 모르는 부분은 도움을 받으며 진행했습니다.

  1. 최종 결과 워크플로우

    해당 방법으로 진행할 경우 중복체크는 되지 않으나 구글 시트에 레딧에서 가져온 게시글의 데이터가 잘 저장이 되는 것을 확인했습니다.
    고도화 시킨다면 구글시트가 아닌 Supabase로 데이터를 저장해볼 생각입니다.

    앱 생성 과정을 보여주는 다이어그램

결과와 배운 점

  1. n8n에서 대략 어떤 노드들이 있는지 파악

  2. custom node의 존재 여부

  3. 외부 서비스 node들을 사용할때는 인증 절차 필요

  4. 크롤링에 다양한 방법 - FireCrawl Custom Node 사용, HttpRquest 사용, Open AI Curl API 사용

1

함께 이야기해요 1

로그인하고 댓글을 남겨 주세요

박신정 프로필 이미지
박신정2025.05.24

잘 모르는 사람으로서 구글시트가 아니라 supabase로 저장해야 하는 이유가 궁금해서 찾아봤는데, 이렇게 해야 안정적인 서비스로 내놓을 수가 있나봅니다. 요즘 자동화 자동화 해서 연결이 쉬운 것 같아도 한걸음 한걸음 배울 게 참 많은 것 같아요. 덕분에 하나 또 배웠습니다. 감사합니다^^

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기