지메일 알림을 변경한 동적페이지 추출(실패)
2025.09.22

소개
모각에서 알려주신 지메일 알림을 카톡으로 수신하는걸 변경해보기로 했습니다
진행 방법

현우님이 여기서 코드 노드, http request 노드는 그대로 쓰면 어디든 활용이 가능하다고 하셨습니다
그래서 광진구 청년포털을 크롤링 해보려 했구요
그런데 동적페이지여서 힘들거같아 포기하려했는데
현우님이 파이썬과 playwright mcp를 쓰면 어렵지만 할 수 있다고 하셨습니다
크롤링하는데 클로드코드가 제대로 하질 못하고 수정을 오래 했는데
토큰 리밋이 많이 걸렸습니다
결국은 수정을 했고 됐다 싶었는데
n8n 워크플로우 작성이 쉽지 않았습니다
결국 아래처럼 나왔는데 이건 자바스크립트 기반이라
앞에서 만든 파일로 작동이 안됐어요

그래도 일단 알람이 오나 확인을 하고 싶었고 알람은 왔습니다

역시 최신정보로 오지도 않고 뒤죽박죽으로 오길래 안 됐구나 했습니다
결과와 배운 점
파이썬 파일을 n8n에 연결하는 방법은 실패했지만
그래도 작동원리는 익혔어요
도움 받은 글 (옵션)
현우님이 모각때 주신 워크플로우
로그인하고 댓글을 남겨 주세요
실패는 했어도 작동원리를 잘 배우셨군요. 수고하셨어요. 청년포털을 크롤링 해보려고 도전하신 게 멋지시네요~ 많은 시행착오 과정이 잘 느껴집니다.




크롤링이 되었다면, 크롤링의 범위에 최신 글이 있는지, 그리고 크롤링 결과물에 글들이 게시된 일시가 포함되어 있는지 확인을 해보세요.🧐
이 2가지가 충족한다면 게시된 일시를 내림차순으로 정렬을 하고, 가장 위에 글을 가져오면 최신 글이 됩니다.🤗
특히, 앞서 가져온 글은 다시 보내면 안되기 때문에 제가 지메일 사례에서 소개해 드린 'Remove Duplicates(Remove Items Processed in Previous Executions)'을 활용해서 이미 보냈던 글들을 필터를 함으로써 최신 글만 남도록 하면 됩니다.🧩
정말 좋은 시도였고, 분명 이런 식으로 접근하면 성공하실 겁니다! 화이팅!!👏