«FarDU ilmiy xabarlari» 31-том 3-сан (2025)
O‘ZBEK TILI IYERARXIK KORPUSINI YARATISHDA MA’LUMOTLAR BAZASINI YIG‘ISH, GAPLARNI ANNOTATSIYALASH VA TOKENLASH JARAYONI
Rahimboeva, Hulkar
Аннотация
<p>Ushbu maqolada o‘zbek tili iyerarxik tahlili korpusini yaratish bosqichlari haqida keng yoritiladi. Xalqaro tajribada biror tilning iyerarxik tahlili korpusini yaratish uchun asosiy beshta soddalashtirilgan bosqichlar mavjudligi va ular haqida keng bayon etiladi. Ushbu bosqichlar quyidagicha: Matnlarni tanlash; oldindan ishlov berish vositalari va manbalarini tanlash; Annotatsiyalash bosqichi; O‘zbek tiliga xos qo‘llanmani hujjatlashtirish va tilning universal bo‘lmagan xususiyatlarini ta’minlash va transliteratsiya bosqichlaridir</p>
Annotatsiyabosqichtokenlashlemmalashmatn tanlovihujjatlashtirishyo‘riqnomanatijajarayonAnnotation
Метадайындар булагы: журналдын OAI-PMH архиви · Sindex толук текстти сактабайт, булакка шилтеме берет.