본문으로 건너뛰기

n8n과 카메라 분석 기반의 공간제어 자동화 워크플로우

jeseop

2025.05.21

n8n과 카메라 분석 기반의 공간제어 자동화 워크플로우 본문 이미지

소개

조명 등 IOT장치등이 LLM Agent에 의해 자동화되도록 시도해보고 싶었습니다.

카메라 기반으로 작성해보고자 했습니다.

진행 방법

어떤 도구를 사용했고, 어떻게 활용하셨나요?

  • n8n

    • 전체 워크플로우 작동

  • tapo IP카메라 / 라즈베리파이 fisheye 카메라

    • 실시간으로 카메라 이미지 제공

  • ffmpeg 등 커맨드 툴

    • 카메라 이미지 가져오고, Zone별로 분할, 해상도 조정 (640x640정도..)

  • 홈어시스턴트

    • IoT 장치 제어

<워크플로우 로드맵 계획>

<현재까지 진행된 n8n 워크플로우>

  • 스케줄 트리거 : 3분간격 실행

  • 커맨드 노드 : 로컬IP카메라에서 하드디스크로 카메라이미지 가져오기, 2개 존으로 분할, 해상도조정

  • Read File 노드 : 분할/조정된 이미지파일 가져오기

  • OpenAI 노드 : 가져온 이미지 분석하고 결과 출력하기

  • 코드 노드 : OpenAI 출력이 Airtable로 넘어가지 않아서, GPT 물어보니 Parsing해야된다고 해서 추가했는데, 꼭 필요한건지 싶습니다.

  • Airtable 노드 : 3분마다 기록된 결과를 기록합니다 (추후 누적된 시간의 정보를 바탕으로 AI가 상황과 맥락분석을 하기위해서 DB화를 하려고 합니다)

    비디오 카메라로 컴퓨터 화면의 스크린 샷
    로봇 비디오를 보여주는 컴퓨터 화면의 스크린 샷
스프레드 시트에서 항목 목록의 스크린 샷
한국어 화면의 스크린 샷

현재까지 빌드한 상태이고..

  • 이후 2단계 LLM 분석 노드

  • IOT 장치제어 실행 노드

  • 텔레그램 메신저 노드

추가 예정입니다!

추가로 궁금한 점은,

  • 이렇게 1분(3분) 단위로 돌아가는 작업에서, 동일한 장문의 프롬프트를 매번 넣어주어야 하는지 궁금해요.
    시스템프롬프트를 장기적으로 입력해서 토큰비용을 아낄 방법도 있는걸까요?

  • 이미지 분석 횟수가 분당 1회 정도로 셋팅하였기에 API로 활용하기에는 사실 비현실적인 워크플로우입니다.
    로컬 LLM 호스팅을 해보고자 하는데, 4090급 PC에서 활용할만한 좋은 이미지분석(공간 상황 및 맥락 분석) 모델을 추천받고 싶어요.

  • 이미지에 변화가 전혀 없을경우 AI분석을 실행하지 않도록 해야 하는데, 어떻게 하는게 좋은 방법일까요?

  • Airtable 내용을 기반으로 OpenAI 모델이 약 30분~1시간 정도의 누적 내용을 기반으로 맥락과 상황을 분석하도록 만들고 싶은데, 어떻게 하면 효율적이고 좋을지 모르겠어요.

결과와 배운 점

  • n8n 정말 좋네요. 틀리지만 않으면 칼같이 작동하고 빨라요. 에어테이블과 함께 작동도 너무 잘되네요.
    더 자세히 공부해보고 싶어졌어요.

  • 보안관련 문제 해결이 어려워서, 일단 방화벽을 다 풀고, 가능한 로컬에서 다 해결했어요..
    비전공자를 위해 이런 기초수준에서 넓은 지식을 알려주는 강의가 있다면 좋겠어요..!

도움 받은 글 (옵션)

  • n8n 로컬호스팅 관련 여러가지 글 참조하였습니다.

  • n8n 노드활용 사례들 여러가지 글 참조하였습니다.

4

함께 이야기해요 4

로그인하고 댓글을 남겨 주세요

Rose 프로필 이미지
Rose2025.05.21

와~ 엄청 멋진 워크플로우입니다~!! 오늘 꼭 발표 보고 싶어요~^^

박신정 프로필 이미지
박신정2025.05.24

와 정말 열공하신 흔적이 너무 느껴집니다. 해보신 분께서 추천해주신 n8n에 관심이 더욱 생기는 순간이네요. CCTV 기능이라니 이런 아이디어는 어디서 얻으신 걸까요?👍👍

김욱영 프로필 이미지
김욱영2025.06.02

1/ 1분(3분) 단위로 돌아가는 작업에서, 동일한 장문의 프롬프트를 매번 넣어주어야 하는지 궁금해요. >> 프롬프트 캐싱 기능을 찾아보시면 좋을 것 같습니다.

2/ 이미지에 변화가 전혀 없을경우 AI분석을 실행하지 않도록 해야 하는데, 어떻게 하는게 좋은 방법일까요? >> 이미지를 흑백 처리 해서 색 변화를 체크하면 어떨까요? 비슷한 머신러닝이 많을 것 같아요. 이미지 비교 센서 등등

Rose 프로필 이미지
Rose2025.06.02

이런 실무 사례~! 너무 잘 봤습니다. 상용화되면 너무 편하고 멋진 솔루션이 될 것 같아요~👍

필요한 AI 정보만
메일함에 쏙쏙 넣어드려요.

지금 핫한 AI 소식부터 직접 해 본 사례까지, 월요일마다 무료로 받아보세요

이런 사례도 있어요

사례 전체 보기