Semantic Chunking
Belgeleri sabit karakter sayısı yerine anlam veya konu değişimine göre parçalara ayırma yöntemi.
Anlamsal parçalama cümle gömmeleri, başlık yapısı veya konu geçişi sinyalleri kullanabilir. Amaç aynı fikri taşıyan bölümü birlikte tutmaktır. Fazla hassas eşikler küçük ve bağlamsız parçalar, gevşek eşikler ise gereksiz uzun bağlam oluşturabilir.
Member comments