How to use xgen-ai/KoModernBERT_SBERT_compare_mlmlv3 with sentence-transformers:
from sentence_transformers import SentenceTransformer model = SentenceTransformer("xgen-ai/KoModernBERT_SBERT_compare_mlmlv3") sentences = [ "한 남자가 다리가 허벅지에 있고 자전거 헬멧이 두 개 뒤에 있는 여자 옆에 앉아 있다.", "그 어린 소년은 야외에서 장난감 비행기를 날리고 있었다.", "사람들은 더 잘 보기 위해 서 있다.", "남자가 여자의 허벅지에 다리를 얹고 있다." ] embeddings = model.encode(sentences) similarities = model.similarity(embeddings, embeddings) print(similarities.shape) # [4, 4]
https://huggingface.co/xgen-ai/KoModernBERT_SBERT_compare_mlmlv3/resolve/main/tokenizer.json
hf download hf://xgen-ai/KoModernBERT_SBERT_compare_mlmlv3/tokenizer.json
curl -L -o tokenizer.json https://huggingface.co/xgen-ai/KoModernBERT_SBERT_compare_mlmlv3/resolve/main/tokenizer.json
