O‘ZBEK Tili Matnlaridagi Nomuhim So‘zlar

Abstract

Axborot texnologiyalari kafedrasi dotsenti, texnika fanlari nomzodi. Bekchanov Shukurla Kurbanbayevich, UrDU Axborot texnologiyalari kafedrasi tayach doktoranti.Annatatsiya. Ma'lumki, matnlarni tahlil qilishda uning mazmunini o'zgartirmaydigan darajada nomuhim so'zlarni matndan olib tashlash masalasi juda katta ahamiyatga ega. Maqolada berilgan o'zbek tilida yozilgan matn uchun nomuhim so'zlarni avtomatik aniqlash bilan o'chirish, kerak bo'lganida asl matnga qayta olish masalasi qaraladi.Kalit so'zlar: nomuhim so'zlar, deep learning, machine learning STOP WORDS IN UZBEK LANGUAGE TEXTSAnnotation. It is well known that in the analysis of texts it is very important to remove from the text stop words that do not change their content. The article deals with the automatic deletion of stop words for the Uzbek text and, if necessary, its return to the original text.Key words: stop words, deep learning, machine learning Matnni sinflarga ajratish yoki ma'nosini tahlil qilish masalasi qo'yilgan bo'lsa biz nomuhim so'zlarni olib tashlashimiz kerak bo'ladi. Chunki ular biz quradigan model uchun ahamyatga ega emas. Ya'ni, ularni olib tashlash orqali model qurishni osonlashtiramiz. Modelni ishlash tezligini oshiramiz va ma'lumotlar hajmini kich-rayishiga erishamiz. Lekin til tarjimasi masalalarini yechish kerak bo'lsa nomuhim so'zlar ahamiyatli bo'ladi, shuning uchun ularni o'chirib tashlamaymiz.Kam ma'noli ma'lumotlarga ega bo'lgan,yoki mustaqil ma'noga ega bo'lmagan, yoki barcha matnlarga xos keng tarqalgan so'zlar nomuhim so'zlari deb ataladi.Nomuhim so'zlar kontseptsiyasi uzoq tarixga ega, Hans Piter Luh 1960 yilda ushbu atamani yaratgan [Luh, 1960]. Ushbu so'zlarning ingliz tilidagi misollari: "a", "the", "of" va "not". Ushbu so'zlar juda keng tarqalgan va odatda ba'zi