«FarDU ilmiy xabarlari» Том 31 № 3 (2025)
O‘ZBEK TILI IYERARXIK KORPUSINI YARATISHDA MA’LUMOTLAR BAZASINI YIG‘ISH, GAPLARNI ANNOTATSIYALASH VA TOKENLASH JARAYONI
Rahimboeva, Hulkar
Аннотация
<p>Ushbu maqolada o‘zbek tili iyerarxik tahlili korpusini yaratish bosqichlari haqida keng yoritiladi. Xalqaro tajribada biror tilning iyerarxik tahlili korpusini yaratish uchun asosiy beshta soddalashtirilgan bosqichlar mavjudligi va ular haqida keng bayon etiladi. Ushbu bosqichlar quyidagicha: Matnlarni tanlash; oldindan ishlov berish vositalari va manbalarini tanlash; Annotatsiyalash bosqichi; O‘zbek tiliga xos qo‘llanmani hujjatlashtirish va tilning universal bo‘lmagan xususiyatlarini ta’minlash va transliteratsiya bosqichlaridir</p>
Annotatsiyabosqichtokenlashlemmalashmatn tanlovihujjatlashtirishyo‘riqnomanatijajarayonAnnotation
Источник метаданных: OAI-PMH архив журнала · Sindex не хранит полный текст, а даёт ссылку на источник.