M Harfi 👁 22 görüntülenme

Model Collapse

Modellerin, yapay zeka tarafından üretilmiş verilerle tekrar tekrar eğitilmesi sonucu çeşitlilik ve kalite kaybetmesi durumu.

Model çöküşü (model collapse), yapay zeka modellerinin, gerçek insan üretimi veri yerine giderek artan oranda yapay zeka tarafından üretilmiş (sentetik) veriyle eğitilmesi sonucunda, zamanla çeşitliliğini, kalitesini ve gerçek dünya dağılımını temsil etme yeteneğini kaybetmesi durumunu tanımlar. Bu süreç, bir modelin çıktısının bir sonraki modelin eğitim verisine karışması ve bu döngünün tekrarlanmasıyla ortaya çıkar: her tekrarda model, veri dağılımının kuyruğundaki nadir ama gerçek örnekleri biraz daha unutur ve en olası, "ortalama" örüntülere doğru yakınsar; sonuçta üretilen içerik giderek daha tekdüze, genel geçer ve ilginç ayrıntılardan yoksun hale gelir.

Bu fenomen, internetin giderek daha fazla yapay zeka üretimi içerikle dolmasıyla önemli bir endişe kaynağı haline gelmiştir çünkü gelecekteki modellerin eğitim verisi, farkında olmadan artan oranda önceki modellerin çıktılarını içerebilir; bu da "veri kirliliği" olarak adlandırılan bir soruna yol açar. Model çöküşünü önlemek için araştırmacılar; eğitim verisinde gerçek, doğrulanmış insan üretimi içeriğin payını korumaya, sentetik ve gerçek veriyi açıkça etiketleyip izlemeye ve veri kaynağının kökenini takip eden sistemler geliştirmeye odaklanmaktadır. Bu konu, üretici yapay zekanın yaygınlaşmasıyla birlikte model eğitiminin sürdürülebilirliği açısından giderek daha kritik bir araştırma alanı haline gelmektedir.