한국어 특화 성능 좋은 임베딩 모델 찾고 있습니다.
namghiwook(ghi)
2025.05.08
한국어 특화 성능 좋은 임베딩 모델 찾고 있습니다.
huggingface embedding leaderboard
https://huggingface.co/spaces/mteb/leaderboard
언어별로도 알아서 순위를 매겨주네요.
한국어는 intfloat/multilingual-e5-large-instruct 임베딩모델이 짱이라고 해서 믿고 사용해보고 있습니다.
정말인가요?
다른 성능 좋은 한국어 특화 embedding model 있으면 소개 부탁드려요
로그인하고 댓글을 남겨 주세요
GPTers2025.05.09
https://huggingface.co/dragonkue/BGE-m3-ko
이거가 젤 괜찮지만 임베딩 모델보다 임베딩할 텍스트 맥락이 제일중요
라고 샘호트만 님께서 답변주셨습니다!
namghiwook(ghi)2025.05.09
모델 소개 감사드립니다.
임베딩할 텍스트 맥락이 제일중요' 라고 하셨는데 RAG 구성하는데 임베딩할 비정형 문서를 다시 잘 가공해서 넣어야 한다는 말씀이신가요?

저거 쓰시면 될듯합니다. 로컬로 하시는 경우에는
저거는 위에 제가 언급한 intfloat/multilingual-e5-large-instruct 말씀이신가요?^
@namghiwook(ghi)
아 BGE-m3-ko 요 유료는 음... open ai 나 cohere 또는 google 께 좋은데 유사한 내용의 문서가 많으면 차원 수 큰걸로 그런게 아니면 google 께 젤 좋을듯합니다. text-embedding-004 였나? 이거저거 섞여 있음 cohere 로 open ai 는 전체적으로 문안하구요. 단, 차원수가 커지면 retrieving 속도가 느려집니다. 임베딩 속도도 느려지고, 목적에 따라서 최적화가 필요하다는 의미 입니다.
@이상연
아 네 자세한 설명 감사합니다.