봇이 반자동화로 멈춘 일, 어사이드로 완전 자동화에 성공하다
2026.10.05
이드'를 부리다
— 로그인 벽에 막힌 광고주 위클리리포트를, 두 대의 맥으로 뚫어 자동화한 기록
💡 한 줄 요약: 맥미니에 상주하는 AI 비서(긍정이)가, 사람만 로그인할 수 있는 데이터(닐슨 ADEX·인스타·유튜브)를 맥북의 '브라우징 에이전트(어사이드)'에게 원격으로 시켜서 가져오고, 그걸 리포트로 자동 완성한 뒤, 매주 금요일 오후 2시에 스스로 돌아가게 만든 이야기.
1. 풀어야 했던 문제
우리 회사는 광고주에게 매주 '위클리리포트'를 보낸다. 예로 들면 3개 파트로 구성된다.
· Part 1. 광고 동향 — 광고주와 경쟁사들의 TV(지상파/종편/케이블) 광고의 주차별 광고비/크리에이티브 집행 현황. 닐슨 ADEX에서 수집.
· Part 2. 경쟁사 보도자료 및 SNS — 유튜브·인스타 콘텐츠.
· Part 3. 뉴스 클리핑 — 마케팅/광고 트렌드, 해당 카테고리 트렌드나 소비/유통 등 이슈를 담당자가 직접 선별(pick).
문제는 '손이 많이 가고 매주 똑같이 반복된다'는 점으로, 회사 후배가 3시간은 들여야 하는 일이었다. 그래서 에이전트 봇으로 자동화를 시도했지만, 가장 큰 벽은 핵심 데이터가 전부 '사람이 로그인해야만 보이는 곳'에 있다는 것이었다. 닐슨 ADEX는 로그인·세션이 필요하고, 인스타·유튜브는 자동 접근(봇)을 차단한다. 따라서 그동안의 위클리 리포트 자동화는 반쪽짜리였다. 되는 건 봇이 하고, 빈칸은 사람이 채웠던 것.
2. 핵심 아이디어 — 'AI가 또 다른 AI(브라우저)를 부린다'
💡 돌파구: 봇 차단·로그인 벽은 '사람처럼 실제 브라우저로 접근'하면 넘을 수 있다. 그래서 긍정이(지휘자)가 어사이드(실행자)에게 '이 사이트 들어가서 이 데이터 뽑아줘'라고 지시하고, 어사이드가 진짜 브라우저로 그 일을 대신 하게 했다. 사람이 하던 '로그인 후 브라우징'을 AI가 물려받은 셈이다.
3. 어떻게 연결했나 (구조)
24시간 켜져 있는 맥미니에는 AI 비서 '긍정이'가 있고, 맥북에는 '어사이드(Aside)'가 있다. 환경이 떨어져 있다는 점이 난이도가 높게 느껴졌던 면이다. 두 대의 맥을 안전하게 묶는 것이 먼저였다.
· 맥미니 → 맥북을 'SSH 키 인증'으로 연결했다. 비밀번호를 매번 치지 않아도, 미리 교환한 열쇠(키)로 긍정이가 맥북에 안전하게 접속한다. (비밀번호를 주고받지 않으므로 보안상 더 안전)
· 맥북에는 어사이드가 명령줄 도구 형태로 설치돼 있다. 긍정이는 맥북에 접속한 뒤, 어사이드에게 '임무(mission)'를 글로 적어 건넨다.
· 어사이드가 실제 브라우저로 그 임무를 수행하고, 결과를 파일(JSON 등)로 떨어뜨린다. 긍정이는 그 결과 파일을 다시 맥미니로 가져와 리포트에 채운다.
💡 데이터 흐름: 긍정이(맥미니, 지휘) → SSH → 어사이드(맥북, 실제 브라우징) → 결과 파일 → 긍정이가 리포트로 가공
4. 실제로 어사이드로 해낸 일
· 닐슨 ADEX 접속·추출: 로그인이 걸린 ADEX에서 광고주별 한 달치 광고 집행 데이터를 조회해 수천 행 규모로 받아왔다.
· 매체별·주차별 집계: 받아온 원본을 '금~목' 주기로 나누고, 매체(지상파·종편·CATV·라디오)별로 광고비를 자동 합산해 리포트의 표와 막대·원형 차트에 넣었다.
· 보도자료·뉴스 수집: 어사이드를 백그라운드로 돌려 경쟁사 보도자료와 업계 뉴스를 모아왔다.
· SNS 수집: 인스타와 유튜브를 좋아요·조회수와 함께 수집했다. — 사람이 로그인해야 보이던 영역을 AI가 대신 본 것.
· 기사 링크 삽입: 리포트의 'LINK' 버튼마다 실제 기사/게시물 URL을 하이퍼링크로 심어, 광고주가 클릭하면 바로 원문으로 이동하게 했다.
5. 일하면서 얻은 레슨
💡 완전 자동 ≠ 전부 자동: 모든 걸 '버튼 하나로'는 아니다. 데이터 수집·집계·표 채우기는 자동화되지만, Part 3 뉴스 클리핑의 '이 기사가 이 광고주에게 의미 있는가'라는 최종 선별은 사람의 판단이 어쩔 수 없이 필요한 부분이다. 그럼에도 불구하고, 리뷰 후 수정보완 정도로 사람이 할 일이 축소된 것은 고무적이다.
· 자동 수집한 숫자·링크는 반드시 검증한다. 지난주 게시물이 없는데 예전(8월) 링크가 남아 엉뚱한 곳으로 가는 버그를 발견해 제거했다. 링크 생존 여부(클릭 시 열리는지)도 샘플 점검했다.
· 사진/이미지가 왜곡되어 첨부되어 있어서 바로잡았다. 최종 컨펌까지 여러 실수가 있어서 꼼꼼히 봐야 했다.
· 임시 폴더(/tmp)에 작업물을 두면 재부팅 때 사라진다. 자동화는 영구 폴더에 두어야 매주 안정적으로 돈다.
· 보고서를 더 잘 쓰게 하는 것만큼, 보고서의 근거를 제대로 가져오게 하는 것이 중요했다.
· 빈칸이 있을 경우 '확인 불가'는 확인 불가, '이번 주엔 없었다'면 없었다 — 정확하게 얘기하는 것.
6. 마지막 단계 — 매주 자동으로 (크론잡)
수동으로 밟던 전 과정을 '크론잡(정해진 시각에 컴퓨터가 스스로 실행하는 예약 작업)'으로 묶었다. 매주 금요일 오후 2시에 긍정이가 스스로:
· 어사이드를 깨워 ADEX·SNS·뉴스 데이터를 수집하고
· 주차별·매체별로 집계해 리포트 초안을 완성한 뒤
· 담당자에게 '리포트 초안'을 첨부한 메일로 전달한다.
이로써 담당자는 최종 검수만 하면 된다. 물론 오류가 있을 경우 보강작업이 필요하더라도, 매주 몇 시간씩 걸리던 반복 작업이 1시간 이내로 줄게 될 것이다.
7. 팁
· 샘플 결과물을 먼저 보여주기 — 수집 대상과 형식을 AI가 임의로 정하게 두지 않는 게 좋았다.
· 못 가져온 자료를 숨기지 않기 — '확인 불가'와 '해당 내용 없음'을 구분해야 보고서를 믿을 수 있다.
· 다운로드 성공에서 멈추지 않기 — 기간·단위·조건·합계까지 확인해야 한다.
· 한 에이전트에게 모든 일을 맡기지도, 버리지도 않기 — 기존 봇을 버리기보다 브라우징 역할을 보완하는 방식으로 접근했다.
· 실행 담당은 하나로 정하기 — 긍정이와 Aside에 같은 예약을 각각 만들면 중복 작업이 생길 수 있다.
8. 앞으로 해보고 싶은 일
로그인된 사이트의 자료를 읽어 정리해야 하는 정기 보고 업무에도 비슷한 구성을 검토할 수 있을 것 같다 (리서치 등에 유용할 듯). PPT 디자인과 연결해 자동화의 체인을 이어 붙여 전 과정을 크론잡화하는 것, 그리고 좀 더 용기가 생기면 결제나 투자도 맡겨보고 싶다.
---
로그인하고 댓글을 남겨 주세요
맥미니의 지휘 에이전트와 맥북의 로그인된 브라우저를 SSH와 결과 파일로 연결해, 수집부터 집계·리포트 초안 전달까지 실제 업무 흐름으로 묶은 규모가 큽니다. 기존 봇을 버리지 않고 브라우징이 필요한 구간만 Aside에 맡긴 것도 실무적인 선택이었어요.
무엇보다 ‘다운로드 성공’에서 끝내지 않은 점이 좋았습니다. 금~목 기준과 매체별 합계를 다시 보고, 오래된 게시물 링크와 왜곡된 이미지를 찾아 고쳤으며, ‘확인 불가’와 ‘이번 주 없음’도 구분하셨더라고요. 뉴스의 최종 선별은 사람에게 남기고 초안까지만 자동화한 구조도 글에서 말한 ‘완전 자동 ≠ 전부 자동’을 잘 보여줍니다.
한 가지는 정기 운영 전에 따로 확인해두면 좋겠어요. 로그인된 브라우저로 접근할 수 있다는 사실과 서비스가 자동 수집을 허용하는 범위는 같지 않으니, 닐슨 ADEX·인스타그램·유튜브는 각 서비스와 회사 내부 기준에서 허용 범위를 먼저 확인하는 편이 안전합니다. 앞으로 언급하신 결제나 투자는 지금의 보고서 자동화와 분리해, 매번 명시적으로 승인하고 실행 결과를 다시 확인하는 작업으로 두는 게 맞고요.
반복 작업을 줄이면서도 검증과 최종 판단을 사람에게 남긴 균형이 좋았습니다. 자동화의 화려함보다 오류를 발견하고 책임 경계를 정한 과정이 이 사례를 더 믿을 만하게 만들었어요.




JAY님, 로그인·봇 차단 때문에 반자동화에 머물던 위클리리포트를 맥미니의 지휘 봇과 맥북의 브라우징 에이전트로 나눠 해결하신 흐름이 인상적이에요.
닐슨 ADEX에서 가져온 수천 행을 금~목 주차로 다시 집계해 매체별 차트까지 연결한 과정 덕분에, 두 기기를 잇는 구조가 실제 업무에 어떻게 쓰였는지 선명하게 보였어요.
예전 8월 게시물 링크가 남는 오류를 찾아 고치고, '확인 불가'와 '이번 주엔 없음'을 구분하신 점도 중요해요. 뉴스의 최종 선별은 사람에게 남겨두셨기에 보고서를 더 믿고 검수할 수 있겠네요.
금요일 오후 2시 자동 실행까지 묶으셨으니, 기존 3시간짜리 반복 업무를 최종 검수 중심으로 줄여가실 다음 과정도 기대돼요. 꼬리 탁! 치고 응원하고 갈게요 🐈⬛