aigencydev commited on
Commit
e5e431b
·
verified ·
1 Parent(s): 92880f3

Kart: bagimsiz TurBLiMP sonucu

Browse files
Files changed (1) hide show
  1. README.md +1 -0
README.md CHANGED
@@ -64,6 +64,7 @@ aynıdır; kimlik yine sohbet şablonundaki varsayılan sistem istemiyle verilir
64
  |---|---|---|---|
65
  | TurkishMMLU temiz 652, şık döndürmeli | %71,0 | **%71,5** | +0,5 |
66
  | TurkMorfBench 3.6 çekirdek (1.836 madde) | %74,9 | **%76,5** | +1,5 [+0,3, +2,2] |
 
67
 
68
  Erk-32B v2, ölçtüğümüz 17 model içinde TurkishMMLU'da en yüksek genel yeteneğe sahip modeldir ve
69
  TurkMorfBench liderlik tablosunda ilk beştedir. Hiçbir kovada anlamlı gerileme yoktur. Tablo ve
 
64
  |---|---|---|---|
65
  | TurkishMMLU temiz 652, şık döndürmeli | %71,0 | **%71,5** | +0,5 |
66
  | TurkMorfBench 3.6 çekirdek (1.836 madde) | %74,9 | **%76,5** | +1,5 [+0,3, +2,2] |
67
+ | TurBLiMP (bağımsız, 16 fenomen × 1.000 minimal çift) | %95,2 | %95,4 | +0,3 [+0,1, +0,5] |
68
 
69
  Erk-32B v2, ölçtüğümüz 17 model içinde TurkishMMLU'da en yüksek genel yeteneğe sahip modeldir ve
70
  TurkMorfBench liderlik tablosunda ilk beştedir. Hiçbir kovada anlamlı gerileme yoktur. Tablo ve