Commit History
-
Adding `safetensors` variant of this model
Verified signatureThis is an automated PR created with https://huggingface.co/spaces/safetensors/convert This new file is equivalent to `pytorch_model.bin` but safe in the sense that no arbitrary code can be put into it. These files also happen to load much faster than their pytorch counterpart: https://colab.research.google.com/github/huggingface/notebooks/blob/main/safetensors_doc/en/speed.ipynb The widgets on your model page will run using this model even if this is not merged making sure the file actually works. If you find any issues: please report here: https://huggingface.co/spaces/safetensors/convert/discussions Feel free to ignore this PR.3839bda
-
Update README.md
Verified signature72a5b6e -
Update README.md
Verified signature## <a name="sentences-transformers"></a> Using Semantic-base-vi with `transformers` ### Installation <a name="install2"></a> - Install `transformers`: - `pip install -U transformers` - Install `pyvi` for word segmentation: - `pip install pyvi` ### Example usage <a name="usage2"></a> ```python import torch from transformers import AutoModel, AutoTokenizer from pyvi.ViTokenizer import tokenize tokenizer = AutoTokenizer.from_pretrained("linhphanff/semantic-base-vi") model = AutoModel.from_pretrained("linhphanff/semantic-base-vi") sentences = [ 'Học sinh cần được hướng dẫn kỹ năng học tập.', 'Thời tiết hôm nay thật đẹp và mát mẻ.', 'Công nghệ AI đang thay đổi thế giới từng ngày.', 'Người dân đổ xô đi mua sắm dịp cuối năm.', 'Giá xăng dầu giảm mạnh so với tháng trước.', 'Chương trình khuyến mãi hấp dẫn đang diễn ra tại các siêu thị.', 'Đội tuyển Việt Nam vô địch giải bóng đá Đông Nam Á.', 'Thủ tướng phát biểu tại hội nghị quốc tế về môi trường.', …e20d476
-
Update README.md
Verified signature354f386
-
Update README.md
Verified signature9a295e9
-
Upload pretrained
ffd3290 -
Update README.md
d4c4410 -
initial commit
0e0b2c6