한국어 특화 성능 좋은 임베딩 모델 찾고 있습니다.
2025.05.08
한국어 특화 성능 좋은 임베딩 모델 찾고 있습니다.
huggingface embedding leaderboard
https://huggingface.co/spaces/mteb/leaderboard
언어별로도 알아서 순위를 매겨주네요.
한국어는 intfloat/multilingual-e5-large-instruct 임베딩모델이 짱이라고 해서 믿고 사용해보고 있습니다.
정말인가요?
다른 성능 좋은 한국어 특화 embedding model 있으면 소개 부탁드려요
로그인하고 댓글을 남겨 주세요
저거 쓰시면 될듯합니다. 로컬로 하시는 경우에는
저거는 위에 제가 언급한 intfloat/multilingual-e5-large-instruct 말씀이신가요?^
@namghiwook(ghi)
아 BGE-m3-ko 요 유료는 음... open ai 나 cohere 또는 google 께 좋은데 유사한 내용의 문서가 많으면 차원 수 큰걸로 그런게 아니면 google 께 젤 좋을듯합니다. text-embedding-004 였나? 이거저거 섞여 있음 cohere 로 open ai 는 전체적으로 문안하구요. 단, 차원수가 커지면 retrieving 속도가 느려집니다. 임베딩 속도도 느려지고, 목적에 따라서 최적화가 필요하다는 의미 입니다.

라고 샘호트만 님께서 답변주셨습니다!
모델 소개 감사드립니다.
임베딩할 텍스트 맥락이 제일중요' 라고 하셨는데 RAG 구성하는데 임베딩할 비정형 문서를 다시 잘 가공해서 넣어야 한다는 말씀이신가요?