commit a0992643557f63c77f2adc08b01c7f48f2bf9f75 Author: MambetniyazovAmir Date: Thu May 28 15:50:24 2020 +0500 update story-uzb diff --git a/testvoc/corpus/uzb-kaa.txt b/testvoc/corpus/uzb-kaa.txt new file mode 100644 index 0000000..5dc21ed --- /dev/null +++ b/testvoc/corpus/uzb-kaa.txt @@ -0,0 +1,11 @@ +*1 #BAXTIYAR #QAY JERDE? +*2 #Baxtıyar *va *Oygul *bog'*da. Búgin *ob-hawa jaqsı, hawa júdá jıllı. *Ammo keshe júdá suwıq *edi! Olar *o'*ynay *olishmadi. #Baxtıyar *va *Oygul *o'*ynashni jaqsı *ko'*radilar, olar #hár #mudam úlken #háwli #aldı *bog'*da birge *o'*ynashadi. +3 #Baxtıyar kishkene bala *va ol altı *yoshda. Kishkene qız onıń *singlisi, ol bes *yoshda. #Baxtıyar kishkene *kuchugi #bar, kushık hám házir *bog'*da. Kushık bul eki *bolakaylar #menen *o'*ynashni jaqsı *ko'#biykarlaw. Kushık házir júdá *hursand. +4 *Oygulning hám *kuchugi *bormi? *Yo'*q, *Oygulda kushık *yo'*q, onda pıshıq #bar. *Ammo, pıshıq úyde, pıshıq *uxlayapti. +5 Olardıń anası pıshıq #menen úyde, ol aynadan qaraydı *va #Baxtıyar #menen *Oygulning *o'*ynayotganini *ko'#biykarlaw. #Baxtıyar *ulkan eski terek #aldı júgirip baradı, ol *Oyguldan *bekinyapti. Bilesizlir ma nege? *Oygul *o'*tiryapti *va *qo'*li #menen *ko'*zini *bekityapti. Ol hesh neni *ko'*rolmaydi *va ol sanamaqta. Nege ol #bunday qıladı? *Va #Baxtıyar terekti *yonida ne *qilyapti? +6 Bul *o'*yin. *Oygul #sana *tugatgandan *so'*ng ol átirapqa qaraydı. Ol #Baxtıyar *qidiryapti: Ol #qay jerge ketti? Onı *ko'*rdingizmi? +*7 *Oygul #Baxtıyar *qayerdaligini bilmeydi. Ol kushıkten *so'*raydi: "#Sen #Baxtıyar *ko'*rdingmi?". *Ammo kushık *gapira almaydı álbette! Usınıń ushın *Oygul sorawına hesh *qanday juwap almaydı. #Odam *kuchukga *gapirishganda hesh *qachon juwap *olishmaydi! +8 *Oygul ayna arqasındaǵı anasına qaraydı, onıń anası *kulyapti. *Oygul onı #Baxtıyar #qay jerge ketkenin *ko'*rdi dep *o'*ylaydi: "Onıń *qayerdaligini aytıńlar!", dedi ol anasına. "*Yo'*q *Oygul, men *senga *ayta almayman!", anası juwap *beradi. Ol #bálkim onıń *qayerdaligini *bilsada, ol *aytgisi *kelmayapti. +*9 *Oygul *bog'*dan #áste júredi. Ol *haliyam #Baxtıyar #tap háreket *qilyapti. Ol stoldıń *tagini *va stullardıń *tagini qaradı, *ammo #Baxtıyar ol *yerda emes. Ol hámme jaydı qıdırıp shıqtı, *ammo ol #Baxtıyar *topa almadı. +*10 Keyin ol bir dawıs esitti, ol *ulkan eski terekti *yonidan *kelayapdi. Ol #Baxtıyar *bo'*lishi *mumkinmi? Jáne dawıs #bar! Ol #dıqqat #menen tıńladı. Ol qus *yoki *boshqa haywan emes. Endi ol onı jaqsı *eshityapti. Ol #Baxtıyar *bo'*lsa kerek! +*11 Keyin ol kishkene *qo'*lni hám *ko'#biykarlaw *va ol *yaqinlashganda onıń basın hám *ko'#biykarlaw! Ol kúledi *va aytadı: "Men *seni taptım!". Olardı #eki hám #baxtıyar *va olar úyge *kirishdi, endi *biron zat *yeyish *va suw #ish waqıtı! diff --git a/testvoc/corpus/uzb-new.txt b/testvoc/corpus/uzb-new.txt new file mode 100644 index 0000000..0ebccfb --- /dev/null +++ b/testvoc/corpus/uzb-new.txt @@ -0,0 +1,11 @@ +1 BAXTIYOR QAYERDA? +2 Baxtiyor va Oygul bog'da. Bugun ob-havo yaxshi, havo juda iliq. Ammo kecha juda sovuq edi! Ular o'ynay olishmadi. Baxtiyor va Oygul o'ynashni yaxshi ko'radilar, ular har doim katta hovli oldidagi bog'da birga o'ynashadi. +3 Baxtiyor kichkina bola va u olti yoshda. Kichkina qiz uning singlisi, u besh yoshda. Baxtiyorning kichkina kuchugi bor, kuchuk ham hozir bog'da. Kuchuk bu ikki bolakaylar bilan o'ynashni yaxshi ko'radi. Kuchuk hozir juda hursand. +4 Oygulning ham kuchugi bormi? Yo'q, Oygulda kuchuk yo'q, unda mushuk bor. Ammo, mushuk uyda, mushuk uxlayapti. +5 Ularning onasi mushuk bilan uyda, u oynadan qaraydi va Baxtiyor bilan Oygulning o'ynayotganini ko'radi. Baxtiyor ulkan eski daraxt oldiga yugurib boradi, u Oyguldan bekinyapti. Bilasizmi nimaga? Oygul o'tiryapti va qo'li bilan ko'zini bekityapti. U hech nimani ko'rolmaydi va u sanayabdi. Nimaga u bunday qiladi? Va Baxtiyor daraxtni yonida nima qilyapti? +6 Bu o'yin. Oygul sanashni tugatgandan so'ng u atrofga qaraydi. U Baxtiyorni qidiryapti: U qayerga ketdi? Uni ko'rdingizmi? +7 Oygul Baxtiyor qayerdaligini bilmaydi. U kuchukdan so'raydi: "Sen Baxtiyorni ko'rdingmi?". Ammo kuchuk gapira olmaydi albatta! Shuning uchun Oygul savoliga hech qanday javob olmaydi. Odamlar kuchukga gapirishganda hech qachon javob olishmaydi! +8 Oygul oyna orqasidagi onasiga qaraydi, uning onasi kulyapti. Oygul uni Baxtiyorni qayerga ketganini ko'rdi deb o'ylaydi: "Uning qayerdaligini ayting!", dedi u onasiga. "Yo'q Oygul, men senga ayta olmayman!", onasi javob beradi. U balkim uning qayerdaligini bilsada, u aytgisi kelmayapti. +9 Oygul bog'dan sekin yuradi. U haliyam Baxtiyorni topishga harakat qilyapti. U stolning tagini va stullarning tagini qaradi, ammo Baxtiyor u yerda emas. U hamma joyni qidirib chiqdi, ammo u Baxtiyorni topa olmadi. +10 Keyin u bir ovoz eshitdi, u ulkan eski daraxtni yonidan kelayapdi. U Baxtiyor bo'lishi mumkinmi? Yana ovoz bor! U diqqat bilan tingladi. U qush yoki boshqa hayvon emas. Endi u uni yaxshi eshityapti. U Baxtiyor bo'lsa kerak! +11 Keyin u kichkina qo'lni ham ko'radi va u yaqinlashganda uning boshini ham ko'radi! U kuladi va aytadi: "Men seni topdim!". Ularni ikkalasi ham baxtiyor va ular uyga kirishdi, endi biron narsa yeyish va suv ichish vaqti! diff --git a/testvoc/corpus/wer-test.txt b/testvoc/corpus/wer-test.txt new file mode 100644 index 0000000..28dc4ce --- /dev/null +++ b/testvoc/corpus/wer-test.txt @@ -0,0 +1,14 @@ +Statistics about input files +------------------------------------------------------- +Number of words in reference: 3 +Number of words in test: 338 +Number of unknown words (marked with a star) in test: 47 +Percentage of unknown words: 13.91 % + +Results when removing unknown-word marks (stars) +------------------------------------------------------- +Edit distance: 336 +Word error rate (WER): 11200.00 % +Number of position-independent correct words: 2 +Position-independent word error rate (PER): 11200.00 % +