Halüsinasyon oranı, bir modelin cevaplarında uydurma ya da yanlış bilgi üretme sıklığını ölçen değerlendirme metriğidir. TruthfulQA (2021), HaluEval ve Vectara'nın "Hallucination Leaderboard"u bu alanda yaygın kullanılan referanslardır. Ölçüm zordur: insan etiketleyici, LLM-as-Judge ya da kontrol setine göre sayısal eşleştirme gibi yöntemler kullanılır ve her yöntem farklı önyargılar taşır. RAG ve Grounding uygulanmış sistemlerde Citation doğrulamasıyla birlikte halüsinasyon oranı operasyonel bir KPI'a dönüşür ve üretim ürünlerinin SLA'larında yer almaya başlar.
MEVZU N°124ISTANBULYEAR I — VOL. III
Sözlük · Orta · 2023
Halüsinasyon Oranı
Bir modelin uydurma ya da yanlış bilgi üretme sıklığını ölçen değerlendirme metriği.
- EN — İngilizce karşılığı
- Hallucination Rate
- TR — Türkçe karşılığı
- Halüsinasyon Oranı