aigencydev commited on
Commit
4c90a0f
·
verified ·
1 Parent(s): 52bfd2b

Kurulus sayfasi: Erk-32B, TurkMorfBench, TurkishMMLU kirlilik listesi; olcum protokolu; taban modeller acikca

Browse files
Files changed (1) hide show
  1. README.md +42 -15
README.md CHANGED
@@ -28,20 +28,38 @@ bir sistem kendi sınırını bilmelidir.
28
 
29
  ---
30
 
31
- ## Öne çıkan model — Erk
32
 
33
- **[Erk](https://huggingface.co/ecloudtech/Erk-14B)**, Türkçe için sıfırdan geliştirdiğimiz
34
- 14 milyar parametreli dil modelidir. Bağımsız ve kamuya açık **TurkishMMLU** kıyaslamasında
35
- test edilen açık Türkçe modellerin **birincisidir** (%69,7).
36
 
37
- | Model | Parametre | TurkishMMLU | Erişim |
38
- |:---|:---:|:---:|:---:|
39
- | **Erk** | 14B | **%69,7** | [Model](https://huggingface.co/ecloudtech/Erk-14B) |
 
 
40
 
41
- Erk'i doğuran tam eğitim reçetesi açık kaynaktır:
42
- [github.com/ecloudtechnology/nanosohbet](https://github.com/ecloudtechnology/nanosohbet)
 
43
 
44
- Genişletilmiş ölçekli sürüm **Erk-32B** üzerindeki çalışmalar başlamıştır.
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
45
 
46
  ---
47
 
@@ -78,11 +96,20 @@ Türkiye, working across artificial intelligence, cybersecurity, blockchain and
78
  development. With offices in Şanlıurfa (HQ), Ankara and Düsseldorf, our vision is to build
79
  AI that understands Turkish from the root.
80
 
81
- Our flagship model **[Erk](https://huggingface.co/ecloudtech/Erk-14B)** — a 14B-parameter,
82
- Turkish-native language model — ranks first among open Turkish models on the independent,
83
- public TurkishMMLU benchmark (69.7%). Its full training recipe is open source at
84
- [nanosohbet](https://github.com/ecloudtechnology/nanosohbet). Work on the larger
85
- **Erk-32B** has begun.
 
 
 
 
 
 
 
 
 
86
 
87
  We also develop AIGENCY (a multimodal, Turkish-first AI platform), Evrak AI (an AI legal
88
  platform), Doctor AI, BICRM, Translator and more.
 
28
 
29
  ---
30
 
31
+ ## Modeller — Erk ailesi
32
 
33
+ **Erk**, açık kaynaklı Qwen3 tabanları üzerine Türkçe devam-eğitimi ve talimat
34
+ ayarıyla geliştirdiğimiz Türkçe dil modeli ailesidir. Taban her kartta açıkça
35
+ belirtilir; her sayı, ölçüldüğü koşulla ve güven aralığıyla verilir.
36
 
37
+ | Model | Taban | TurkishMMLU, temiz 652 · şık döndürmeli | Lisans | |
38
+ |:---|:---:|:---:|:---:|:---:|
39
+ | **Erk-32B** (Eylül 2026) | Qwen3-32B | **%71,01** — tabana göre +3,37 [+0,61, +6,13] | Apache-2.0 | [Model](https://huggingface.co/ecloudtech/Erk-32B) · [GGUF](https://huggingface.co/ecloudtech/Erk-32B-GGUF) |
40
+ | **Erk-14B** | Qwen3-14B | %67,18 — tabana göre +6,60 [+3,07, +10,28] · tam küme 0-shot: %69,7 | eCloud Açık Topluluk | [Model](https://huggingface.co/ecloudtech/Erk-14B) |
41
+ | **Erk-Linear** | Erk-14B | dikkat katmanlarının lineerleştirilmesi — hibrit model ve sınır analizi | | [Model](https://huggingface.co/ecloudtech/Erk-Linear) |
42
 
43
+ *Temiz 652*: TurkishMMLU'nun web'de birebir geçen %12,6'sı ve eğitimde izlenen
44
+ 150 soru dışarıda; şık sırası döndürülerek ölçülür. Erk-14B'nin %69,7'si tam
45
+ kümede, döndürmesiz 0-shot ölçümüdür; aynı modelin iki koşuldaki iki sayısıdır.
46
 
47
+ **Ölçüm protokolü ve yeniden üretim:** kirlilik denetimi, şık döndürme, zorunlu
48
+ seçim ve eşli bootstrap uygulanmadan hiçbir sayı raporlanmaz. Protokol belgesi,
49
+ 33 betik ve soru-bazlı sonuç vektörleri Erk-32B deposunda açıktır.
50
+
51
+ ## Veri kümeleri ve araçlar
52
+
53
+ | | |
54
+ |:---|:---|
55
+ | [**TurkMorfBench**](https://huggingface.co/datasets/ecloudtech/TurkMorfBench) | Türkçe morfoloji kıyası: 512 madde, 8 ek görevi, 40 gerçek + 24 uydurma (wug) gövde; üretim ve zorunlu seçim kipleri. CC BY 4.0 |
56
+ | [**TurkishMMLU Kirlilik Listesi**](https://huggingface.co/datasets/ecloudtech/TurkishMMLU-Kirlilik) | TurkishMMLU'nun 900 test sorusundan Türkçe web'de birebir geçen 113'ünün (n=13) dizin ve özeti; yöntem ve betik. CC BY 4.0 |
57
+ | [nanosohbet](https://github.com/ecloudtechnology/nanosohbet) | Erk-14B'nin açık eğitim reçetesi |
58
+
59
+ GitHub: [erk-32b](https://github.com/ecloudtechnology/erk-32b) ·
60
+ [turkmorfbench](https://github.com/ecloudtechnology/turkmorfbench) ·
61
+ [turkishmmlu-kirlilik](https://github.com/ecloudtechnology/turkishmmlu-kirlilik) ·
62
+ [erk](https://github.com/ecloudtechnology/erk) · [erk-linear](https://github.com/ecloudtechnology/erk-linear)
63
 
64
  ---
65
 
 
96
  development. With offices in Şanlıurfa (HQ), Ankara and Düsseldorf, our vision is to build
97
  AI that understands Turkish from the root.
98
 
99
+ Our **Erk** family are Turkish language models built on open Qwen3 bases with
100
+ Turkish continued pretraining and instruction tuning; the base is stated on every
101
+ card and every number comes with the condition it was measured under and a
102
+ confidence interval. **[Erk-32B](https://huggingface.co/ecloudtech/Erk-32B)**
103
+ (September 2026, Apache-2.0, [GGUF](https://huggingface.co/ecloudtech/Erk-32B-GGUF))
104
+ scores 71.01% on contamination-free TurkishMMLU (+3.37 [+0.61, +6.13] over its base);
105
+ **[Erk-14B](https://huggingface.co/ecloudtech/Erk-14B)** scores 67.18% under the same
106
+ protocol (69.7% on the full set, 0-shot). We also publish
107
+ **[TurkMorfBench](https://huggingface.co/datasets/ecloudtech/TurkMorfBench)**, a
108
+ Turkish morphology benchmark with nonce stems, and a
109
+ **[TurkishMMLU contamination list](https://huggingface.co/datasets/ecloudtech/TurkishMMLU-Kirlilik)**
110
+ (113/900 test questions found verbatim on the Turkish web). Measurement protocol,
111
+ scripts and per-item result vectors are open in the Erk-32B repository; Erk-14B's
112
+ training recipe is open at [nanosohbet](https://github.com/ecloudtechnology/nanosohbet).
113
 
114
  We also develop AIGENCY (a multimodal, Turkish-first AI platform), Evrak AI (an AI legal
115
  platform), Doctor AI, BICRM, Translator and more.