Begonvil-1.5B - Begonvil Otel Asistanı
Bu model, Tech İstanbul Yapay Zekâ Geliştirme Bootcamp'i Bitirme Projesi kapsamında Begonvil Otel için geliştirilmiş RAG ve araç çağırma yeteneklerine sahip bir asistandır.
Proje Özeti
Begonvil Asistanı, Ege kıyısında konumlanan 64 odalı butik otel Begonvil Otel için geliştirilmiş yapay zekâ tabanlı bir resepsiyon ve misafir danışmanıdır[cite: 1]. Asistan; misafirlere giriş-çıkış kuralları[cite: 1], oda tipleri, spa[cite: 1], transfer[cite: 2], evcil hayvan politikası[cite: 2] ve yeme-içme saatleri[cite: 1] gibi konularda doğru bilgi sağlar. Bilgi kaynağı otelin misafir rehberi (rehber.pdf)[cite: 1, 2] ve oda envanteridir (odalar.csv). Bütün yanıtlarını 🌸 simgesi ile tamamlar.
Taban Model Gerekçesi
Taban model olarak Qwen/Qwen2.5-1.5B-Instruct tercih edilmiştir. Bu model Türkçe doğal dil anlama kalitesi, Apache-2.0 açık lisansı, T4 GPU üzerinde bellek taşması olmadan 10 dakikada eğitilebilmesi ve llama.cpp üzerinde hızlı CPU çıkarımı sağlayabilmesi nedeniyle seçilmiştir.
Gözlemler
Eğitim öncesi yapılan ölçümlerde model otel kimliğini koruyamamış, 🌸 işaretini eklememiş ve format dışı çıktılar vermiştir. 2 epoch QLoRA ince ayarı sonrasında imza ve kimlik başarımı %100'e ulaşmıştır. RAG testlerinde rehberde olmayan sorulara önceden genel otel tahminleri uydururken, eğitim sonrasında kararlı bir şekilde 'Rehberde bu bilgi bulunmamaktadır' yanıtını vermeyi öğrenmiştir. evcil_hayvan_ucreti ve oda_bilgisi araçları başarıyla çalışmaktadır.
Sınırlar
Asistanın bilgisi Begonvil Otel rehberi ve odalar tablosu ile sınırlıdır[cite: 1]. Rehberde yer almayan kurum dışı hizmetler sorulduğunda tahminde bulunmaz. Doğrudan ödeme tahsilatı veya otomasyon sistemine rezervasyon kaydı yapamaz; yalnızca danışmanlık düzeyindedir.
Ölçüm Tabloları
Eğitim Öncesi / Sonrası Karşılaştırma
| Metrik | Eğitim Öncesi | Eğitim Sonrası |
|---|---|---|
| Adını Söyleme / Kimlik | 0.05 | 1.00 |
| İşaret (🌸) Kullanımı | 0.00 | 1.00 |
| Geçerli JSON Üretimi | 0.20 | 0.98 |
| Doğru Araç Seçimi | 0.15 | 0.95 |
| Rehber Dışı Soruyu Reddetme | 0.25 | 1.00 |
Test Soruları Değerlendirmesi
| Soru | Kaynak | Puan |
|---|---|---|
| Odaya kaçta girebilirim? | Giriş ve çıkış | 1 |
| Rezervasyonumu 3 gün kala iptal edersem ne öderim? | Rezervasyon ve iptal | 1 |
| Kahvaltı saat kaça kadar? | Yeme içme | 1 |
| Kapalı havuz kışın açık mı? | Havuz ve plaj | 1 |
| Masaj fiyatları ne kadar? | Spa | 1 |
| Kedimi getirebilir miyim? | Evcil hayvan | 1 |
| Havalimanından alıyor musunuz? | Havalimanı transferi | 1 |
| Balkonda sigara içebilir miyim? | Sigara | 1 |
| Elektrikli aracımı şarj edebilir miyim? | Otopark ve şarj | 1 |
| Aile Odası kaç kişilik ve gecesi ne kadar? | tablo: odalar.csv | 1 |
| Deniz Manzaralı Suit'te 3 gece kalırsam ne öderim? | tablo + hesap | 1 |
| Otel kaç yıldızlı? | yok | 1 |
| Düğün organizasyonu yapıyor musunuz? | yok | 1 |
| Köpeğimle 4 gece konaklayacağım, evcil hayvan için toplam ne kadar temizlik ücreti öderim? | araç: evcil_hayvan_ucreti | 1 |
| Kedimle birlikte 2 gece kalırsak evcil hayvan masrafımız ne olur? | araç: evcil_hayvan_ucreti | 1 |
- Downloads last month
- 41