«FarDU ilmiy xabarlari» Ҷилди 31 № 3 (2025)
O‘ZBEK TILI IYERARXIK KORPUSINI YARATISHDA MA’LUMOTLAR BAZASINI YIG‘ISH, GAPLARNI ANNOTATSIYALASH VA TOKENLASH JARAYONI
Rahimboeva, Hulkar
Аннотатсия
<p>Ushbu maqolada o‘zbek tili iyerarxik tahlili korpusini yaratish bosqichlari haqida keng yoritiladi. Xalqaro tajribada biror tilning iyerarxik tahlili korpusini yaratish uchun asosiy beshta soddalashtirilgan bosqichlar mavjudligi va ular haqida keng bayon etiladi. Ushbu bosqichlar quyidagicha: Matnlarni tanlash; oldindan ishlov berish vositalari va manbalarini tanlash; Annotatsiyalash bosqichi; O‘zbek tiliga xos qo‘llanmani hujjatlashtirish va tilning universal bo‘lmagan xususiyatlarini ta’minlash va transliteratsiya bosqichlaridir</p>
Annotatsiyabosqichtokenlashlemmalashmatn tanlovihujjatlashtirishyo‘riqnomanatijajarayonAnnotation
Манбаи метамаълумот: бойгонии OAI-PMH-и маҷалла · Sindex матни пурраро нигоҳ намедорад, ба манбаъ пайванд медиҳад.