İnce Ayar ile Geliştirilmiş Gemma 3 Tabanlı Müşteri Temsilcisi Değerlendirme Sistemi


Creative Commons License

Taşkıran M., Aslan E., Kahraman N.

17. Uluslararası Akademik Araştırmalar Kongresi (ICAR), Ankara, Türkiye, 19 - 20 Şubat 2026, ss.187-191, (Tam Metin Bildiri)

  • Yayın Türü: Bildiri / Tam Metin Bildiri
  • Basıldığı Şehir: Ankara
  • Basıldığı Ülke: Türkiye
  • Sayfa Sayıları: ss.187-191
  • Açık Arşiv Koleksiyonu: AVESİS Açık Erişim Koleksiyonu
  • Yıldız Teknik Üniversitesi Adresli: Evet

Özet

Büyük Dil Modelleri doğal dil işleme alanında dil yapısı, anlam bilgisi ve akıl yürütme gibi birçok görevde yüksek performans elde eden bir kavram olarak karşımıza çıkmaktadır. Büyük Dil Modelleri üzerine çalışan araştırmacıların ilgilendiği konulardan biri de diyalog kalitesi değerlendirmedir ve bu başlık birçok sektör için hayati öneme sahiptir. Bu çalışma kapsamında, kalite değerlendirme birimleri tarafından gerçekleştirilen Müşteri temsilcilerine ait konuşmaların incelenmesi işlemini, hızlı ve yüksek başarımla gerçekleştirebilecek özelleşmiş bir model oluşturmaya odaklanılmıştır. Son dönemde önerilmiş yüksek performanslı dil modelleri ile gerçekleştirilen kıyaslama çalışmaları sonucunda ince ayar yapılmış modelin %95'lik başarım elde ettiği gözlemlenmiştir. Bu sonuç, otonom müşteri temsilcisi değerlendirme modelleri yaratabilecek gelecek çalışmalar için umut vadetmektedir.