Canlı Kıyaslama Veri Seti Bakımı
Kıyaslama setinin güncelliğini ve güvenilirliğini koruyan yönetişim süreci tasarlar.
PROMPT
Zamanla eskiyen bir LLM kıyaslama veri seti için bakım planı hazırla. Sızıntı tespiti, zorluk kayması, konu dengesi ve cevap anahtarı doğrulamasını kapsa. Aylık örnekleme süreci, kör değerlendirme yöntemi, sürüm numarası kuralı ve sonuçların geçmiş sürümlerle karşılaştırılma biçimini yaz.
Köşeli parantezli alanları kendi hedefin, kitlen ve bağlamınla değiştir.
Promptu önerilen araca yapıştır; ilk çıktıyı bir taslak olarak değerlendir.
Eksik noktaları belirt, örnek ekle ve istediğin çıktı biçimini daha kesin tanımla.
Üye yorumları