rat-77m

約77Mパラメータの日英対応 T5系 Encoder-Decoder モデル。

  • 仕様書: docs/spec.md
  • データ: Mouserat/llmjp4-2b-dataset
  • 語彙: mT5-small から頻度上位64kに切り詰め(カバー率99.53%)
  • 前回失敗作 (t5-6lang-77m) の教訓を反映(fixed embedding init 必須)

Status: 仕様策定中

Downloads last month
178
Safetensors
Model size
76.9M params
Tensor type
F32
·
Inference Providers NEW
This model isn't deployed by any Inference Provider. 🙋 Ask for provider support