MTEB ( Massive Text Embedding Benchmark )

<aside> 📖

MTEB는 2022년 Hugging Face 연구팀이 발표한 텍스트 임베딩 모델 평가 벤치마크이다.

기존에 STS(Semantic Textual Similarity) 같은 단일 태스크로만 평가하던 한계를 극복하기 위해 만들어졌다.

</aside>

<aside> 📄

논문: MTEB: Massive Text Embedding Benchmark

</aside>

• 8가지 태스트 유형
• 허깅 페이스에서의 MTEB 확인

추가 고려 요소

• Max Tokens ( 최대 토큰 수 )
• Embedding Dimensions ( 임베딩 차원 )