🤗 HuggingFace가 뭔가요? 뭘 할 수 있나요?

안녕하세요. HuggingFace 캠프 파트너 정정민입니다.

이번 포스팅에서는 본 부트캠프에서 다루려는

• HuggingFace가 무엇인지

• 이걸 캠프에서 어떻게 활용할 수 있는지

• 그리고 간단한 활용 사례

에 관한 이야기를 해보려 합니다.

HuggingFace?? 🤗

허깅 페이스는 미국의 AI 스타트업이며, 동시에 이 회사에서 제공하는 플랫폼(https://huggingface.co)의 이름입니다.

챗봇 앱을 개발하던 원래 비지니스 모델에서 벗어나,

본인들이 개발하던 언어 처리 AI 모델을 오픈하고 다른 사람과 공유하면서

사람들의 큰 관심을 받게 된 오픈 소스 커뮤니티 입니다.

그래서 허깅 페이스 플랫폼은

• 다양한 연구 결과물을 공유하는 기능

  • 코드, 학습 모델, 데이터, 기타 meta data

• 공유된 연구 결과물을 가져다 쓸 수 있는 기능

을 쉽게 사용할 수 있습니다.

매력적인 기능으로 많은 사용자들이 모이게 되었고

나아가 그 외의 편의적 기능들도 지원해주게 되었어요.

대략 아래와 같은 것들이 있습니다.

• AI 모델을 사용할 수 있는 웹 사이트(Gradio) 제작

• AI 모델을 호스팅 할 수 있는 백엔드 서버 및 관련 코드 작업

• AI 모델을 새로운 나의 데이터로 Fine-Tuning 하는 과정

• 등등

이런 많은 기능들은

HuggingFace를 사용하는 모든 사용자에게 오픈입니다. 그것이

• 연구적으로든 : 새로운 모델 개발, 업로드

• 개발적으로든 : 코드로 API 호출, 나의 서비스에 도구로 활용하기, MVP 만들기

• 개인 공부적으로든 : 연구된 결과물을 코드 단위로 확인하고 공부하기

• 취미적으로든 : 기술 성과를 직접 써보고 느껴보기, 어떤 연구가 있는지 확인하기

어떤 것을 목표로 하더라도 말이죠!

HuggingFace가 왜 필요한가요??

우리에게 친숙한 AI 관련된 이벤트로는 알파고(2016), ChatGPT의 출현(2022.11) 정도가 있네요.

그리고, ChatGPT나 나오면서 우리는 LLM, 생성형 AI와 같은 이야기를 접하게 되었죠.

그래서, AI 라고 한다면 생성형 모델이구나! 라는 인식이 강합니다.

하지만 AI 라는 학문은 1950년부터 꾸준히 발전되어오고 있던 학문입니다.

70년이 넘는 기간동안 말이죠!

무언가를 생성한다는 문제(task)는 상당히 어려운 문제입니다.

• 그림을 보고 강아지를 맞추는 것 vs 강아지를 상상해서 그리는 것 → 사람의 입장에서도 후자가 더 어렵죠

그래서 더 오랜 역사와 다양한 데이터, 정교하게 빚어진 모델은 비-생성형 AI들입니다.

어떤 사람이 갖고 있는 문제를 해결하기위해 필요한 AI 모델은

꼭 생성형 AI 만은 아닐겁니다.

여기서 문제가 발생해요.

요즘은 생성형 AI가 대세인 시대라, 비-생성형 AI에 대한 정보를 얻기가 쉽지 않습니다 ㅠㅠ

이를 위해 HuggingFace를 사용합니다.

HuggingFace에는 2024. 06. 현재 71만개의 모델을 포함하고 있는 거대한 플랫폼입니다

• 그 수는 점점 늘고있고, 그 속도는 점점 더 빨라지죠

이 안에는 생성형 AI 말고

비-생성형 AI도 많이 존재합니다.

“이런 문제를 해결해줄 수 있는 AI 모델이 있을까??”

있을 가능성이 (생각보다) 큽니다.

그 존재를 모르고,

그것을 찾는 방법을 몰랐을 뿐!!

저희 캠프에서는 그런 과정에서 HuggingFace를 사용할 예정입니다.

HuggingFace를 캠프에서 어떻게 쓰나요?

앞서 설명드린 바와 같이,

HuggingFace는 다양한 목적으로 사용할 수 있습니다.

그만큼 다양한 기능을 제공합니다. (제가 파악한 부분 말고도 훨씬 더 많아요!)

우리 HuggingFace 캠프에서는 이런 HuggingFace의 기능에 제한을 두지 않습니다.

AI 관심이 있는 각자의 이해도 증강, 각자의 목적과 꿈을 달성하는 과정에서 Fully 사용하려 합니다.

따라서,

• AI에 대한 충분한 이해로 새로운 AI 기능을 만들어 플랫폼과 오픈 커뮤니티에 연구적으로 기여하려는 분들

• AI를 충실한 도구로 사용해 특정 문제를 풀고 해결하려는 개발자 분들

• 연구 구현물을 사용해보고 이를 익히려는 미래의 연구 & 개발자 분들

• 최신 연구 결과물을 직접 사용하고 체험하려는 얼리 어답터 분들

• 등등

다양한 분들이 캠프에 참여해 각자의 관심도에 맞는 AI와 HuggingFace를 즐기는 것을 목표로 합니다.

HuggingFace Spaces 둘러보기

HuggingFace Spaces는 (https://huggingface.co/spaces)

연구 그룹에서 진행된 연구를 Demo 형식으로 만들어

외부에서 사용할 수 있는 형태로 제공한 페이지 입니다.

(AI 결과물을 놀이 기구삼아 이것저것 만지고 놀아보는 놀이터랑 비슷한 느낌이랄까요?? ^^)

글을 작성하는 시점(24년 1월)에 Spaces에 업로드 된 Demo 페이지는 아래와 같네요.

얼리 어답터를 위한 예시 1

먼저, 가장 앞에 있는 것(Draw To Search Art)을 들어가보죠 - 링크

아래와 같은 화면이 나오고, 상단을 보니 이 Demo를 위한 설명이 나옵니다.

영어가 적혀있으므로 재빠르게 DeepL의 도움을 받습니다 ㅎ;;

내가 그린 그림?과 비슷한 아트웍을 찾아주는 Demo네요.

사진 업로드도 가능하고, 직접 그리는 것도 가능하네요.

제가 아트웍에는 문외해서 ㅎㅎ;; 찾고 싶은 아트웍이 없으니 일단 아무거나 그려보고 결과를 보도록 하겠습니다.

예술적 감각을 좀 키울필요가 있어보입니다 ㄷ ㄷ;;;

그래도 결과와 과정이 재밌네요.

이러한 결과를 어떤 방식으로 더 사용할 수 있을까요?

• 예술과 관련된 교육적인 자료로 사용하거나,

  • 아이들 그림 공부,

  • 시험 문제?

• 그림 데이터 베이스에서의 이미지 서칭 기술이 사용되었을 것 같으므로
  이런 비슷한 문제를 풀기위한 공부를 진행할 수 있겠네요.

얼리 어답터를 위한 예시 2

쭉 둘러보다보니 이런 예시가 또 있더군요.

심지어 두 가지 서로 다른 데모를 이용할 수 있었어요!

segment-anything-web 이라는 데모(https://huggingface.co/spaces/Xenova/segment-anything-web)는

이미지 안에서 선택한 객체의 누끼를 따주는 데모네요.

인터넷에서 금붕어 사진을 넣어서 금붕어의 누끼를 따볼까요?

누끼를 따고 싶은 객체를 선택하면 가능하고

Cut mask를 누르면 실제로 png 파일이 다운로드 되네요.

나름 잘 된 것 같습니다.

이 기세를 몰아, 이 누끼 딴 이미지를 새로운 데모의 입력으로 넣어보겠습니다.

TriplaneGaussian 이라는 데모(https://huggingface.co/spaces/VAST-AI/TriplaneGaussian)는

입력으로 받은 이미지 내의 객체를 3차원으로 모델링 해주는 매우매우 신박한 데모입니다!

• 실제로 이 연구는 23년 12월에 연구되어 논문화 된 연구 결과물이에요. (논문 링크)

아래는 결과입니다.

각각의 데모도 재미있었고,

이를 같이 활용하면 더욱 흥미로운 경험과 결과를 얻을 수 있어보입니다.

저는 6살 조카가 좋아하는 티니핑 캐릭터를 3D 모델링으로 만들고

이걸 3D 프린팅으로 프린트해서 주면 얼마나 좋아할까 생각이 들었습니다 ㅎㅎ

여러분들은 어떤 사용법이 생각나시나요 ^^??

AI에 관심만 있다면 누구나!

누구나 돌려볼 수 있는 Spaces의 여러 Demo에는 상당히 좋은 퀄리티의 데모가 많이 있습니다.

하지만 이런 데모는 연구 결과를 보여주는 하나의 수단이므로

모든 연구로부터 이런 경험을 얻기는 어려울 수 있습니다.

실제로 연구자의 추가적인 노력과 고생이 들어가니깐요.

하지만 고생스럽게 잘 만들어진 연구는

그 결과를 널리 알리기 위해 HuggingFace를 많이 활용하려 합니다. (그런 추세가 늘어가고 있구요!)

그런 흐름을 타서, 기술의 초 선두에 다가간 연구를 사용해보고

창의적인 생각을 뿜어내는 AI 시대의 적응자가 되어보시면 어떨까요 ^^??

다음 포스팅은 코드 레벨에서 연구 결과물을 살펴보는 포스팅으로 이야기 해볼까 합니다.

감사합니다.

HuggingFace 부트캠프 많이 놀러오세요 🤗

#11기HuggingFace #10기HuggingFace #9기HuggingFace

작성자 : 정정민

블로그 : 링크

유튜브 : 링크