QISQA MATNLARDA PARAFRAZ ANIQLASH SAMARADORLIGINI OSHIRISH: GRAF-NAZARIY MA'LUMOT KENGAYTIRISH VA KO'P-KASKADLI CHUQUR MODEL YONDASHUVI

Abstract

Parafraz aniqlash bir xil mazmunni turli sintaktik shaklda ifodalovchi matn juftliklarini avtomatik tarzda tanib olish vazifasi bo'lib, plagiat aniqlash, takrorlanuvchi savollarni bir-biriga bog'lash va mijozlarga xizmat ko'rsatish tizimlarini yaxshilash kabi ko'plab amaliy sohalarda muhim ahamiyat kasb etadi. Chuqur o'rganish modellari parafraz klassifikatsiyasida yuqori natijalar bergani bilan, ularning samaradorligi katta hajmdagi qo'lda yorliqlangan ma'lumotlar mavjudligiga bevosita bog'liq, biroq bunday annotatsiya jarayoni vaqt va moliyaviy resurs talab qiladigan murakkab jarayondir. Ayniqsa qisqa matnlar (yangilik sarlavhalari, savollar, tvitlar) uchun mavjud yorliqlangan to'plamlar hajman cheklangan bo'lib, bu esa chuqur modellarning umumlashtirish qobiliyatini pasaytiradi. Shu bilan birga, qisqa va norasmiy (shovqinli) matnlar uchun mo'ljallangan yechimlar odatda toza matn (masalan, yangilik sarlavhalari) uchun samarasiz bo'lib chiqadi, bu esa bir vaqtning o'zida ham toza, ham shovqinli matnlarda barqaror ishlaydigan universal yondashuvlar ishlab chiqish zaruratini keltirib chiqaradi.