제미나이와 구글 시트 활용하여 이미지에서 글자 추출하여 표 만들고, 시트에서 원하는 자료 찾기

소개

제미나이를 이용해서 이미지에 있는 글을 표로 만들고, 이 표를 구글 스프레드 시트로 저장합니다. 그리고 해당 시트에서 제미나이 기능을 이용해서 바로 원하는 자료만 찾아보는게 잘 되는지 확인해보고 싶었습니다

연습 이미지는 지피터스 14기 수강생 모집 안내문

한국 전자 학습 플랫폼 - 스크린 샷

✅ 이미지를 pdf 파일로 변환

pdf 지피터스 AI스더티 14기 시간표.pdf
135.7KB

🚀 진행 방법

  • 사용 도구: 제미나이(Gemini), 구글 스프레드 시트

  • 과정

1️⃣ 이미지에서 텍스트 추출하여 표 만들기

  1. 지피터스 사이트에서 AI스터디 14기 모집 페이지에 있는 모집 안내문 화면 캡쳐
    => 화면이 길어서 2번에 나누어 캡처를 했는데 제미나이는 이미지 1개만 업로드 가능해서
    포토스케이프에서 2개 이미지를 하나로 합쳤습니다.

    => 이미지 인식을 잘 못해서 PDF로 변환하고 연습해보려고 구글 드라이브에 이 PDF 파일을 업로드 했습니다

  2. 제미나이에서 위 이미지를 업로드하고 다음 프롬프트 입력

    "이 파일의 이미지를 표로 만들어 줘"

    한국 문자 메시지의 스크린 샷
  3. 구글 시트로 저장 : 화면 아래 오른쪽 : [Sheets로 내보내기]

    한국어 텍스트가있는 화면


    2️⃣ 구글 드라이브에서 오타 수정과 제미나이 활용하여 원하는 정보 조회

  1. 구글 드라이브로 가서 생성된 시트 열기

  2. 오타 수정

  3. 화면 위 오른쪽 [Gemini에 질문] 클릭

    한국어 텍스트가 장착 된 Google 스프레드 시트
  4. 제미나이에서 원하는 질문

    한국 Google Docs Korean Google Docs Korean Google Docs Korean Google

    제미나이 프롬프트 예시

    - 화요일에 하는 스터디명 알려줘
    - 수요일에 하는 스터디 몇개야?

    - 교육연구 스터디는 뭐야?

    Tip: 제미나이는 이미지 1개만 업로드 가능합니다

Tip: 제미나이에서 구글 드라이브를 연동하면 원하는 파일을 선택해서 작업이 가능한데 이미지 파일은 불러 올 수 없습니다.

Tip: 이미지에서 텍스트 추출을 잘 하는 편이지만 오타와 잘못된 자료가 입력되는 경우가 있으니 반드시 원본자료와 대조해서 오타 수정이 필요합니다

🎯 결과와 배운 점

결과:

  • 이미지에서 자동으로 표 데이터를 추출하고 정리할 수 있음

  • 구글 시트에서 제미나이로 원하는 정보 조회 가능

📌 배운 점:

  • 제미나이에서 이미지 업로드 하면 텍스트 추출은 물론 표 작성 가능

  • 구글 시트와 AI를 활용하면 정보 조회와 데이터 분석 및 관리가 쉬워진다.

  • 아직은 글자 추출시 오타가 있고 완벽한 정보 조회는 되지 않는다

  • 위 작업을 제미나이에서 해보기전에 챗GPT 에서 해봤는데 질문을 구체적으로 하면
    챗GPT가 더 만족스러운 결과 나옴
    질문과 답변의 형식에 따라 챗GPT, 제미나이는 그때 그때 다른 결과를 보여주니 되도록 두 모델을 다 써보는 것을 추천드립니다


📌 추가로 시도해볼 것

  • 제미나이에서 구글 드라이브의 2개 이상의 파일을 불러 원하는 자료 생성해보기

  • 구글 앱스크립트를 활용해 버튼 클릭만으로 필터링 기능 자동화

✅ 아래 링크는 챗GPT로 연습해본 내용을 정리한 글입니다
https://blog.naver.com/metadoseon/223719350817

3

👉 이 게시글도 읽어보세요