← Ana sayfaBüyük Dil Modelleri

LLM'ler Artık Belgeleri Daha Ucuza Bölebiliyor

· Kaynak

LLM'ler Artık Belgeleri Daha Ucuza Bölebiliyor
Fotoğraf: Jo Lin / Unsplash

Taranmış mektuplar, yüklenen PDF’ler ve birleştirilmiş ekler genellikle sayfa akışı olarak gelir ve sınıflandırma, veri çıkarma veya yönlendirme işlemlerinden önce ayrı belgelere bölünmesi gerekir. Bu süreci daha verimli hale getirmek için araştırmacılar yeni bir yöntem geliştirdi.

Geleneksel yaklaşımlar sınırlamalar içeriyor:

  • Her sayfa sınırı kararı için ayrı model çağrısı gerekiyor, işlem maliyetini artırıyor
  • Sıfır-atış büyük dil modelleri (LLM’ler) özel eğitim olmadan sınırları tespit edebiliyor ancak verimli değil
  • Sayfa Sınıflandırması (PC) ve Sınır Kararı (BD) yöntemleri bir seferde yalnızca bir sınırı çözebiliyor

Araştırmacılar tarafından sunulan Multi-Split Boundary Decision (MSBD) yaklaşımı bu sorunu çözmek için tasarlandı. Yeni formülasyon, LLM’lerin bir çağrıda birden fazla belge sınırını algılamasını mümkün kılıyor. Bu, hem işlem süresini hem de API çağrı maliyetini önemli ölçüde düşürüyor.

Belge parçalama, doküman yönetim iş akışlarının temel bir adımıdır. Özellikle kurumsal ortamlarda büyük hacimde belge işlenirken bu tür optimizasyonlar pratik değeri yüksektir. Daha az model çağrısı, daha düşük maliyetli ve hızlı otomasyona olanak tanır.