File size: 5,452 Bytes
14da36b
 
27346c3
 
 
 
 
14da36b
27346c3
 
 
 
8f86589
 
14da36b
 
681f971
6b48a86
14da36b
 
1bf64ae
 
 
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
 
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
14da36b
1bf64ae
 
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
 
 
 
 
14da36b
1bf64ae
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
 
 
 
 
 
14da36b
1bf64ae
14da36b
 
1bf64ae
 
14da36b
 
 
1bf64ae
14da36b
 
1bf64ae
 
14da36b
 
1bf64ae
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
14da36b
1bf64ae
14da36b
1bf64ae
14da36b
1bf64ae
 
 
14da36b
1bf64ae
14da36b
1bf64ae
 
 
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
---
tags:
- gguf
- lilo
- cybersecurity
- indonesian
- llama-cpp
language:
- id
- en
datasets:
- zelapi/lilo-cyber
base_model:
- zelapi/lilo
---

![Lilo Public Preview Dark](image/dark.png)

# Lilo Cyber

Model bahasa Indonesia yang fokus pada **keamanan siber, pemrograman, dan analisis teknis**.
Dikemas sebagai **GGUF Q4_K_M** dengan ukuran sekitar **2.4 GB**, jadi bisa dijalankan lokal
di CPU laptop tanpa GPU, dan tetap punya karakter jawaban yang singkat serta terstruktur.

## Kenapa model ini dibuat

Model besar (27B, context 200K) memang bagus, tapi bobotnya berat: butuh GPU,
boros biaya API per token, dan tidak bisa dipakai offline saat jauh dari internet.
Di sisi lain, model kecil
generik sering ngaco di soal cybersecurity — memberi rekomendasi yang salah,
atau buru-buru menambahkan setting tanpa menjelaskan risikonya.

Lilo Cyber dibuat untuk mengisi celah itu:

- **Jalan di CPU, offline, gratis** — format GGUF Q4_K_M, context pendek, jumlah thread sedikit
- **Bahasa Indonesia** — istilah keamanan siber diterjemahkan natural, bukan literal translation
- **Jawaban ringkas dan actionable** — checklist, perintah, langkah bernomor, bukan paragraf panjang
- **Cukup pintar untuk coding & cyber** — code review, analisis log, config hardening, skrip

Untuk agent dengan budget terbatas, atau untuk siapa pun yang sering kerja
tanpa koneksi internet, ini titik masuk yang murah.

## Fokus model

| Area | Contoh tugas |
|---|---|
| Hardening | Checklist Ubuntu/Debian, nginx, SSH, Docker |
| Audit & log | Analisis log auth, deteksi anomali, korelasi event |
| Pemrograman | Code review, debugging, menulis skrip, optimasi query |
| DevOps | CI/CD hardening, image scanning, secret management |
| Incident response | Containment, eradication, post-mortem ringkas |
| Threat modeling | STRIDE, abuse case, attack surface mapping |

## Parameter runtime

Nilai-nilai ini dipilih supaya **nyaman di RAM kecil**:

| Parameter | Nilai | Alasan |
|---|---|---|
| `num_ctx` | 1024 | Batas context rendah = VRAM/RAM jauh lebih hemat |
| `num_thread` | 2 | CPU 2 vCPU adalah titik bottleneck yang paling sering ditemui |
| `num_batch` | 128 | Batch kecil → latensi lebih stabil di CPU |
| `temperature` | 0.7 | Cukup variatif tanpa terlalu liar |
| `top_p` | 0.9 | Memotong ekor distribusi token yang noise |
| `repeat_penalty` | 1.1 | Mengurangi pengulangan kalimat |
| `stop` | `<start_of_turn>`, `<end_of_turn>` | Gaya chat gemma, jadi berhenti rapi |

Prompt template (gemma):

```
<start_of_turn>user
{prompt}<end_of_turn>
<start_of_turn>model
```

### Contoh

```bash
./llama-cli -m lilo-cyber-Q4_K_M.gguf -c 1024 -t 2 -n 256 --chat-template gemma \
  -p "Buat checklist hardening untuk server Ubuntu"
```

## Benchmark

Di bawah ini perbandingan indikator standar industri antara model ini dan model
generasi besar yang umumnya dipakai sebagai referensi (angka dari sumber publik
masing-masing model, jadi bersifat indikatif — **bukan hasil pengukuran langsung
atas model ini**):

| Atribut / Metrik | Claude Haiku 5.5 | Gemma 2 (27B) | Gemma 3 (27B) | **Lilo Cyber** |
|---|---|---|---|---|
| Penyedia / Sifat | Anthropic (proprietary) | Google (open weights) | Google (open weights) | **Open weights, lokal** |
| Arena AI (Text) | Sangat tinggi (#26 di Agent) | Menengah–tinggi | Tinggi | **Tidak masuk arena (model niche)** |
| MMLU | ~78–80% | 75.2% | ~79.5% | **Tidak dilaporkan** |
| HumanEval (coding) | Tinggi / unggul | 51.8% | ~56.4% | **Tidak dilaporkan** |
| Context window | 200.000 token | 8.192 token | 32.000 / 64.000 token | **1.024 token (aktif)** |
| Harga input / 1M token | $0.10 | Gratis lokal / variatif | $0.08 (API) | **Gratis, offline** |
| Harga output / 1M token | $0.50 | Gratis lokal / variatif | $0.16 (API) | **Gratis, offline** |
| Ukuran file | — | — | — | **~2.4 GB (Q4_K_M)** |
| Kebutuhan GPU | Tidak wajib (API) | Tidak wajib | Tidak wajib | **Tidak perlu** |

### Poin analisis

- **Claude Haiku 5.5** unggul di workflow agentik, coding kompleks, dan dokumen
  panjang berkat context 200K. Konsekuensinya: model proprietary, biaya per token, dan butuh internet.
- **Gemma 2 / 3 (27B)** unggul dari sisi biaya operasional — open weights, bisa lokal
  gratis atau disewa API murah. Tapi ukuran model besar, jalankan nyaman di CPU.
- **Lilo Cyber** — trade-off-nya berbeda: ukurannya kecil (2.4 GB), bisa jalan
  di CPU mana pun, sepenuhnya offline, dan spesialis di domain cyber/coding berbahasa Indonesia.
  Ia **bukan** pengganti model 27B untuk pengetahuan umum atau dokumen panjang.

### Kapan pakai yang mana

| Kebutuhan | Pilihan |
|---|---|
| Review kode panjang, dokumen besar, agentic workflow | Claude Haiku 5.5 |
| Knowledge base luas, chat umum, ribuan Q&A | Gemma 3 (27B) |
| Hardening server, analisis log, cyber ops, offline | **Lilo Cyber** |
| RAM terbatas (< 4 GB), tanpa GPU | **Lilo Cyber** |

## Keterbatasan

- Context hanya 1.024 token — pertanyaan panjang harus dipecah
- Pengetahuan umum bukan fokus; angka MMLU/HumanEval sengaja tidak diklaim
- Memberi rekomendasi keamanan yang salah tetap mungkin — **verifikasi selalu sebelum dipakai** ke sistem nyata
- Kecepatan token/detik rendah di CPU dibanding model yang dijalankan di GPU

## Cara pakai

**llama.cpp**

```bash
./llama-cli -m lilo-cyber-Q4_K_M.gguf -c 1024 -t 2 -n 256 --chat-template gemma
```

**Ollama**

```bash
ollama create lilo-cyber -f Modelfile
ollama run lilo-cyber
```