Metodologiya va statistika

Kollokatsiya assotsiatsiya mezonlari va ilmiy korpus ko‘rsatkichlari

Metodologiya KWIC Konkordans Bosh sahifa

1. Korpus Hajmi va Leksik Boylik (Tokens & Types)

Har bir asar va til bo‘yicha aniq hisoblangan tokenlar, unikal so‘z shakllari va Type-Token nisbati (TTR)

Tokenizer: \b[\w\u02bb\u02bc'-]+\b
Asar va Nashr Roli Tili Jami Tokenlar (N) Unikal Shakllar (Types, V) TTR (V / N) Gapaks so‘zlar (Hapax) Status
Normallashtirilgan Chastota Formulasi (Kichik korpuslar uchun 10,000 tokenga):

$$\text{NormFreq} = \frac{\text{RawFreq}}{N} \times 10{,}000$$

Barcha chastotalar yonida uning maxraji (denominator $N$) qat'iy ko‘rsatiladi. Bu kichik hajmli badiiy korpuslarda chastotalarni ob'ektiv taqqoslash imkonini beradi.

2. Formulalar va 2×2 Kontingentlik Hisoblagichi

Kollokatsiya assotsiatsiya mezonlari: Pointwise Mutual Information ($MI$), Student's $t$-score va Dunning Log-Likelihood ($G^2$)

Pointwise Mutual Information (MI):

$$MI = \log_2 \left( \frac{O_{11} \cdot N}{R_1 \cdot C_1} \right)$$

Student's t-score:

$$t = \frac{O_{11} - E_{11}}{\sqrt{O_{11}}}, \quad \text{bu yerda } E_{11} = \frac{R_1 \cdot C_1}{N}$$

logDice (Rychlý, 2008 — Asosiy leksikografik mezon):

$$\text{logDice} = 14 + \log_2 \left( \frac{2 \cdot O_{11}}{R_1 + C_1} \right)$$

Dunning Log-Likelihood (G², 1993):

$$G^2 = 2 \sum_{i=1}^2 \sum_{j=1}^2 O_{ij} \ln \left( \frac{O_{ij}}{E_{ij}} \right)$$

Akademik izoh (1.1-fasl): Asosiy mezon sifatida korpus hajmiga bog'liq bo'lmagan $logDice$ qo‘llanadi; $MI$ kam uchraydigan juftliklarga yuqori ball beradi (faqat chastota filtri bilan olinadi), $t$-score faqat ishonchlilik ko‘rsatkichi sifatida qaraladi, chegara sifatida qo‘llanmaydi.

Shaffof 2×2 Kontingentlik Kalkulyatori:

Hisoblash namunasi — korpus natijasi emas
Kutilgan (E11)
0.05
logDice
7.8439
MI Score
7.6439
t-Score
3.1465
Log-Likelihood (G²)
89.2209

3. Korpusdagi Kollokatsiyalar Assotsiatsiya Ko‘rsatkichlari

Barcha hisoblangan birikmalar uchun kirish sonlari (O11, R1, C1, N) va natijaviy mezonlar

Birlik (Node + Collocate) Tili O11 (f) R1 (f₁) C1 (f₂) N (Korpus) E11 MI t-score Log-Likelihood (G²) Norm / 10k
Yuklanmoqda...
1 / 1

4. III Bob Statistik Jadvallari (Faqat Tasdiqlangan Annotatsiyalardan)

Har bir foiz yonida uning umumiy soni (denominator $n = \dots$) qat'iy ko‘rsatilgan

3.1-Jadval. Struktur Qoliplar Taqsimoti (Asarlar va Yo‘nalishlar Kesimida)

Struktur Qolip Cho‘lpon (UZ ➔ EN) Hemingway (EN ➔ UZ) Jami (n)

3.3-Jadval. Tarjima Ekvivalentligi Turlari Taqsimoti

Ekvivalentlik Turi Cho‘lpon (UZ ➔ EN) Hemingway (EN ➔ UZ) Jami (n)

3.4-Jadval. Tarjima Strategiyalari Taqsimoti

Tarjima Strategiyasi Cho‘lpon (UZ ➔ EN) Hemingway (EN ➔ UZ) Jami (n)