CALLAII
Dil modeliCallmenta panelindeki yapay zekâ yüzeylerini çalıştıran dil modeli: çağrı analizi, koçluk, canlı destek, CRM ve CALLAII Hukuk.
CALLAII’nin sekizinci sürümü ve yeni asıl modeli. Çağrıyı şirketin kendi kriterlerine göre puanlar, özeti yalnız görüşmede olanla yazar. Hukuki metinleri kütüphanedeki kaynağa ve usule bağlı kalarak hazırlar. Eğitimi 15 Ekim 2026’da tamamlandı. CALLAII v7 ile aynı sınavlardan geçti, sonuçlar aşağıda.
Bu sürümde gelişenler
- Çağrı analizinde talep türünü 40 gerçek çağrıda %81,8 doğrulukla buluyor, v7’de %22,7 idi
- 534 analizin hepsinde geçerli çıktı veriyor
- Düşünme kapalıyken de hukuki cevaba usul kontrolüyle başlıyor: 70 soruda 61, v7’de 22
- Hukuk belgelerinde kritik atıf ve alıntı hatası 70 belgede 8’den 4’e indi
- Harita sorularında 90, şekil saymada 95 puan
- Enerji ekranlarında rota planı değerlendirme 20’den 93,3’e çıktı
Sınırlar ve sorumlu kullanım
- Çözüm durumunda doğruluk hâlâ sınırlı: hedefli çağrılarda 123 soruda 76 doğru. Bu alan ekranda öneri olarak kalmalı
- Hukuk belgelerinin kalitesi bu turda hakemle puanlanmadı. Her belge avukat kontrolünden geçmeli
- Hukuki bilgi modelin hafızasından gelmez, kaynak her seferinde güncel kütüphaneden getirilir
- Rakam ve tarihler doğrulanmalıdır
Eğitim ve ölçümler
| Eğitim verisi | 61.461 örnek, 8.000’i görüntülü |
|---|---|
| Doğrulama seti | 186 örnek |
| Adım | 3.842 · 1 devir · adım başına 16 örnek |
| Eğitim bağlamı | 32.768 token |
| Eğitim tarihi | Ekim 2026 |
| Her ekranın verisi canlı sistemin kendi istemiyle üretildi. Model gördüğü istemle eğitiliyor | |
| Dilekçe, ihtarname ve hukuk sohbetinde kaynak kütüphaneden gelir. Usul denetimi yalnız verilen maddelere dayanır | |
| Çağrı puanlaması, hangi davranışın eksik olduğu önceden bilinen örneklerle öğretildi. Gerçek çağrılarda üç ayrı değerlendirmenin ortası esas alındı, sınıflandırma alanları insan etiketine göre düzeltildi | |
| Canlı sohbette iç kuralları paylaşmamak, her dilde şirketin kendi adıyla konuşmak ve bilinmeyen ürünü uydurmamak ayrıca öğretildi | |
| Satış, çapraz satış ve yetkinlik senaryoları bilinen doğrularla denetlendi | |
| Sınav için ayrılan gerçek çağrılar eğitime girmedi |
Her nokta ardışık 7 kaydın ortalaması.
Değerleri tablo olarak göster
| Eğitim kaybı | |
|---|---|
| 35 | 0,7007 |
| 210 | 0,5514 |
| 385 | 0,5294 |
| 560 | 0,4948 |
| 735 | 0,5226 |
| 910 | 0,5209 |
| 1.085 | 0,4995 |
| 1.260 | 0,4866 |
| 1.435 | 0,4916 |
| 1.610 | 0,4829 |
| 1.785 | 0,4963 |
| 1.960 | 0,4516 |
| 2.135 | 0,4679 |
| 2.310 | 0,4778 |
| 2.485 | 0,4750 |
| 2.660 | 0,4592 |
| 2.835 | 0,4596 |
| 3.010 | 0,4480 |
| 3.185 | 0,4427 |
| 3.360 | 0,4400 |
| 3.535 | 0,4327 |
| 3.710 | 0,4643 |
| 3.840 | 0,4225 |
| Doğrulama kaybı | |
| 100 | 0,4600 |
| 300 | 0,3948 |
| 500 | 0,3773 |
| 700 | 0,3684 |
| 900 | 0,3574 |
| 1.100 | 0,3421 |
| 1.300 | 0,3386 |
| 1.500 | 0,3330 |
| 1.700 | 0,3276 |
| 1.900 | 0,3223 |
| 2.100 | 0,3152 |
| 2.300 | 0,3126 |
| 2.500 | 0,3068 |
| 2.700 | 0,3018 |
| 2.900 | 0,2982 |
| 3.100 | 0,2957 |
| 3.300 | 0,2947 |
| 3.500 | 0,2932 |
| 3.700 | 0,2930 |
| 3.842 | 0,2929 |
CALLAII v7 ile kıyas
v8 ile canlıdaki önceki asıl model v7 aynı sınavlara aynı koşulda girdi. Ölçüm 15 Ekim 2026’da aynı sınav sunucusunda yapıldı. Çağrı analizi ve düşünmeli usul sınavı üç koşu, diğerleri tek koşu. Çağrılar ve istem iki modelde de aynı. Doğrulama kayıpları farklı setlerle ölçüldüğü için sürümler arasında karşılaştırılmaz.
- Çağrı analizinde geçersiz çıktı 534 analizde 3’ten 0’a indi.
- Doğru cevabı önceden belirlenmiş 40 gerçek çağrıda talep türü %22,7’den %81,8’e çıktı. En büyük sıçrama bu alanda.
- Aynı çağrılarda çözüm durumu %54,5’ten %68,2’ye çıktı. Puanlanabilir çağrıyı ayırma %84,2’den %94,2’ye, risk düzeyi %77,3’ten %81,8’e çıktı.
- 138 hedefli çağrıda talep türü %70,4’ten %97,2’ye çıktı. Puanlanabilir çağrıyı ayırma %64,7’den %78,4’e, risk düzeyi %66,7’den %74,2’ye çıktı.
- Hedefli çağrılarda çözüm durumu neredeyse yerinde saydı. 123 soruda 73’ten 76’ya çıktı. Bu alan hâlâ en zayıf alan.
- Hukuk usul denetiminde v7 de v8 de düşünmeli kipte 70 sorunun 70’inde cevaba usul kontrolüyle başladı. Düşünmesiz kipte bu 22’den 61’e çıktı.
- Hukuk belgelerinde denetimin kritik saydığı atıf ve alıntı hatası 70 belgede canlı ayarla 8’den 4’e indi. Düşünmesiz koşuda 8’den 3’e indi. Kesilen belge 1’den 0’a indi. Örnek küçük, belge kalitesi bu turda ayrıca puanlanmadı.
- Harita sorularında puan 60’tan 90’a, şekil saymada 80’den 95’e çıktı.
- Enerji ekranlarında rota planı değerlendirme 20’den 93,3’e, saha görevi hazırlığı 53,3’ten 90’a çıktı. Yönetici rota 93,3’te aynı kaldı.
Aynı çağrılar ve aynı istem, 3 koşunun toplamı. Geçerli çıktı vermeyen analiz yanlış sayıldı.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Puanlanabilir mi | 84,20 | 94,20 |
| Risk düzeyi | 77,30 | 81,80 |
| Çözüm durumu | 54,50 | 68,20 |
| Talep türü | 22,70 | 81,80 |
Aynı çağrılar ve aynı istem, 3 koşunun toplamı. Geçerli çıktı vermeyen analiz yanlış sayıldı.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Puanlanabilir mi | 64,70 | 78,40 |
| Risk düzeyi | 66,70 | 74,20 |
| Çözüm durumu | 59,30 | 61,80 |
| Talep türü | 70,40 | 97,20 |
Düşünmeli kipte 3 koşunun ortancası, düşünmesiz kipte bir koşu.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Usul kontrolüyle başlama, düşünmeli | 100,00 | 100,00 |
| Usul noktaları, düşünmeli | 85,70 | 88,60 |
| Usul kontrolüyle başlama, düşünmesiz | 31,40 | 87,10 |
Düşük değer daha iyi. Denetim karar numarasını, kanun maddesini ve alıntıyı gerçek metinle karşılaştırır. Belge kalitesi bu turda ayrıca puanlanmadı.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Kritik hata, canlı ayar | 8,00 | 4,00 |
| Kritik hata, düşünmesiz | 8,00 | 3,00 |
| Kesilen belge, canlı ayar | 1,00 | 0,00 |
Kesin cevaplı sorular, bir koşu. Harita 100 soru, diğer görüntü 18 puanlı soru, şekil sayma 60 soru.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Harita | 60,00 | 90,00 |
| Diğer görüntü | 82,30 | 100,00 |
| Şekil sayma | 80,00 | 95,00 |
Ekran başına 30 görev, adreste 38 adres, tek koşu.
Değerleri tablo olarak göster
| CALLAII v7 | CALLAII v8 | |
|---|---|---|
| Rota planı değerlendirme | 20,00 | 93,30 |
| Saha asistanı | 96,70 | 100,00 |
| Saha görevi hazırlığı | 53,30 | 90,00 |
| Temsilci asistanı | 80,00 | 96,70 |
| Yönetici rota | 93,30 | 93,30 |
| Adres ayrıştırma | 92,10 | 96,20 |
Önceki sürümler
CALLAII v7 · Önceki sürüm
CALLAII v7 yayında. Canlıdaki önceki sürüm v6 ile aynı sınavdan, canlıdaki ayarlarla geçirildi. Hukuki sorularda usulü neredeyse her seferinde kontrol ediyor: görevli ve yetkili mahkeme, dava şartı ve süreler. Dilekçelerde avukatın anlatmadığı bilgiyi yakalayıp çıkaran ek bir denetimle birlikte çalışıyor.
Bu sürümde gelişenler
- Hukuk kipinde usul kontrolü: 70 sorunun 69’unda yapıyor, canlıdaki v6 aynı sınavda hiçbirinde yapmıyordu
- Usul kontrol noktalarını karşılama 70 soruda 8’den 57’ye çıktı
- Düşünme kapalı genel kipte de usul kontrolü 0’dan 23’e çıktı
- Cevaplar daha derli toplu: genel kipte sınıra takılıp kesilen cevap 40’tan 11’e indi
- Belge görselinden metin okuma ve görsel tarif etme eğitimden sonra da tam korundu
Sınırlar ve sorumlu kullanım
- Hukuki bilgi modelin hafızasından gelmez; kanun, yönetmelik ve karar her seferinde güncel kütüphaneden getirilir
- Ürettiği metin taslaktır; dilekçe, sözleşme ve resmî yazı yetkili bir kişi tarafından onaylanmalıdır
- Rakam ve tarihler doğrulanmalıdır
- Türkçe dışındaki dillerde kalite Türkçe kadar ayrıntılı ölçülmemiştir
Eğitim ve ölçümler
| Eğitim verisi | 45.847 örnek |
|---|---|
| Doğrulama seti | eğitimde hiç görülmemiş 200 örnek |
| Adım | 2.859 · 1 devir · adım başına 16 örnek |
| Eğitim bağlamı | 4.096 token |
| Doğrulama kaybı | 0,629 → 0,513 |
| Sınav | 70 usul sorusu; canlı v6 ile aynı sorular, canlıdaki ayarlar |
| Eğitim tarihi | Eylül 2026 |
Her nokta ardışık 5 kaydın ortalaması.
Değerleri tablo olarak göster
| Eğitim kaybı | |
|---|---|
| 0,01 | 0,8421 |
| 0,05 | 0,6483 |
| 0,10 | 0,5975 |
| 0,14 | 0,5828 |
| 0,18 | 0,5622 |
| 0,23 | 0,5602 |
| 0,27 | 0,5509 |
| 0,31 | 0,5387 |
| 0,36 | 0,5504 |
| 0,40 | 0,5220 |
| 0,45 | 0,5358 |
| 0,49 | 0,5406 |
| 0,53 | 0,5296 |
| 0,58 | 0,5333 |
| 0,62 | 0,5053 |
| 0,66 | 0,5165 |
| 0,71 | 0,5090 |
| 0,75 | 0,5308 |
| 0,80 | 0,5334 |
| 0,84 | 0,5043 |
| 0,88 | 0,5118 |
| 0,93 | 0,5051 |
| 0,97 | 0,5022 |
| 1,00 | 0,4946 |
| Doğrulama kaybı | |
| 0,07 | 0,6293 |
| 0,14 | 0,5990 |
| 0,21 | 0,5781 |
| 0,28 | 0,5642 |
| 0,35 | 0,5544 |
| 0,42 | 0,5433 |
| 0,49 | 0,5368 |
| 0,56 | 0,5298 |
| 0,63 | 0,5238 |
| 0,70 | 0,5194 |
| 0,77 | 0,5163 |
| 0,84 | 0,5139 |
| 0,91 | 0,5129 |
| 0,98 | 0,5127 |
| 1 | 0,5126 |
Aynı 70 hukuk sorusu, canlıdaki ayarlarla. Hukuk kipinde düşünme açık, genel kipte kapalı.
Değerleri tablo olarak göster
| Canlı v6 | v7 | |
|---|---|---|
| Usul kontrolü · hukuk | 0,00 | 98,60 |
| Usul noktaları · hukuk | 11,40 | 81,40 |
| Usul kontrolü · genel | 0,00 | 32,90 |
| Usul noktaları · genel | 11,40 | 45,70 |
Teknik föy
| Sürüm | v7 |
|---|---|
| Yayın | Eylül 2026 |
| Girdi | Metin ve görsel |
| Çıktı | Metin |
| Dil | Türkçe odaklı; diğer dillerde aynı dilde yanıt |
CALLAII v6 · Önceki sürüm
CALLAII v6, Callmenta panelindeki yapay zekâ yüzeylerinin tamamını çalıştırır. Bu iş için sıfırdan üretilmiş veriyle eğitildi; her örnek kural denetimlerinden ve bir hakem değerlendirmesinden geçti.
Bu sürümde gelişenler
- Dilekçe ve sözleşme üslubu, çalıştığımız hukuk bürosunun gerçek belgelerinden öğrenildi
- Sözleşme hazırlama ve delil inceleme eklendi
- Çok turlu konuşma ve araç kullanımı güçlendirildi
- Eğitim, hiç görülmemiş 740 örnekle düzenli sınandı; doğrulama hatası her ölçümde düştü, model ezberlemedi
Neler yapar
- Çağrı analizi: görüşme dökümünden özet, aksiyon, kaçırılan fırsat, kriter karnesi
- Koçluk: temsilci performansı için kanıta dayalı geri bildirim
- Canlı destek: ziyaretçi sorularını yanıtlar, gerekirse insana devreder
- CRM ve rapor: müşteri kartı özeti, gösterge okuma, yorum
- CALLAII Hukuk: dilekçe ve sözleşme hazırlığı, belge analizi, mevzuat ve içtihat sorusu
- KVKK maskeleme: kişisel veriyi metinden ayıklama
- Araç kullanımı: panel içinde arama, kayıt açma, belge getirme
- Görsel okuma: belge ve ekran görüntüsünü anlama
Sınırlar ve sorumlu kullanım
- Hukuki bilgi modelin hafızasından gelmez; kanun, yönetmelik ve karar her seferinde güncel kütüphaneden getirilir
- Ürettiği metin taslaktır; dilekçe, sözleşme ve resmî yazı yetkili bir kişi tarafından onaylanmalıdır
- Rakam ve tarihler doğrulanmalıdır; eksik bilgide uydurmak yerine eksiği söyleyecek şekilde eğitilmiştir
- Çok uzun belgeler bölünerek işlenir
- Türkçe dışındaki dillerde kalite Türkçe kadar ayrıntılı ölçülmemiştir
Eğitim ve ölçümler
| Eğitim verisi | 37.102 örnek, 118 milyon token |
|---|---|
| Kalite elemesi | üretilen 47.872 örneğin 37.600'ü kabul edildi |
| Doğrulama seti | eğitimde hiç görülmemiş 740 örnek |
| Adım | 3.101 · 2 devir · adım başına 96.000 token |
| Eğitim bağlamı | 12.288 token |
| Doğrulama kaybı | 0,7435 → 0,4729 |
| Eğitim tarihi | Eylül 2026 |
Yalnız ölçülen noktalar; aradaki adımların kaydı saklanmadı.
Değerleri tablo olarak göster
| Eğitim kaybı | |
|---|---|
| 0 | 0,7800 |
| 2.700 | 0,3951 |
| 3.101 | 0,3763 |
| Doğrulama kaybı | |
| 0 | 0,7435 |
| 2.700 | 0,4730 |
| 3.101 | 0,4729 |
Üretilen her örnek kural denetiminden ve hakem değerlendirmesinden geçti; geçemeyen elendi.
Değerleri tablo olarak göster
| Örnek | |
|---|---|
| Üretilen | 47.872,00 |
| Kabul edilen | 37.600,00 |
| Eğitim | 37.102,00 |
| Doğrulama | 740,00 |
Teknik föy
| Sürüm | v6 |
|---|---|
| Yayın | Eylül 2026 |
| Girdi | Metin ve görsel |
| Çıktı | Metin |
| Dil | Türkçe odaklı; diğer dillerde aynı dilde yanıt |
| Müşteri verisi | eğitime girmez |
| Çalıştığı yer | Callmenta'nın yönettiği sunucular; veriniz üçüncü taraf bir yapay zekâ sağlayıcısına gönderilmez |
CALLAII v5 · Önceki sürüm
CALLAII'nin ilk geniş kapsamlı sürümü.
Bu sürümde gelişenler
- Çağrı merkezi, koçluk ve canlı destek yüzeyleri tek modelde toplandı
Eğitim ve ölçümler
| Eğitim verisi | 45 bin örnek, 15 kategori, 9 dil |
|---|---|
| Adım | 411 · 1 devir |
| İşlenen token | 26,7 milyon |
| Son doğrulama kaybı | 0,4867 |
| Doğrulama token doğruluğu | %85,4 |
Değerleri tablo olarak göster
| Eğitim kaybı | |
|---|---|
| 10 | 2,7335 |
| 30 | 1,2499 |
| 50 | 0,8402 |
| 70 | 0,7024 |
| 90 | 0,6135 |
| 110 | 0,5847 |
| 130 | 0,5689 |
| 150 | 0,5584 |
| 170 | 0,5385 |
| 190 | 0,5599 |
| 210 | 0,5412 |
| 230 | 0,5371 |
| 250 | 0,5122 |
| 270 | 0,5038 |
| 290 | 0,5125 |
| 310 | 0,5011 |
| 330 | 0,4956 |
| 350 | 0,4728 |
| 370 | 0,4874 |
| 390 | 0,4968 |
| 410 | 0,4969 |
| Doğrulama kaybı | |
| 40 | 0,8849 |
| 80 | 0,6208 |
| 120 | 0,5651 |
| 160 | 0,5402 |
| 200 | 0,5221 |
| 240 | 0,5106 |
| 280 | 0,5010 |
| 320 | 0,4927 |
| 360 | 0,4880 |
| 400 | 0,4867 |
| 411 | 0,4867 |
Değerleri tablo olarak göster
| Eğitim | |
|---|---|
| 10 | 57,20 |
| 30 | 70,07 |
| 50 | 78,02 |
| 70 | 80,74 |
| 90 | 82,59 |
| 110 | 83,02 |
| 130 | 83,40 |
| 150 | 83,64 |
| 170 | 84,01 |
| 190 | 83,63 |
| 210 | 83,78 |
| 230 | 83,92 |
| 250 | 84,41 |
| 270 | 84,64 |
| 290 | 84,49 |
| 310 | 84,78 |
| 330 | 84,86 |
| 350 | 85,33 |
| 370 | 85,09 |
| 390 | 84,94 |
| 410 | 84,81 |
| Doğrulama | |
| 40 | 77,40 |
| 80 | 82,75 |
| 120 | 83,79 |
| 160 | 84,25 |
| 200 | 84,61 |
| 240 | 84,85 |
| 280 | 85,04 |
| 320 | 85,23 |
| 360 | 85,32 |
| 400 | 85,37 |
| 411 | 85,37 |
Teknik föy
| Sürüm | v5 |
|---|---|
| Yayın | Eylül 2026 |
| Durum | v6 ile değiştirildi |