---
title: "Token setiap perkataan: Arab vs Inggeris dan cara mengukur"
description: "Mengapa bahasa Arab sering guna lebih banyak token LLM daripada Inggeris bagi makna sama, mengapa token setiap perkataan mengelirukan, dan skrip untuk mengukurnya."
url: https://broadrouter.com/ms/blog/tokens-per-word-arabic-english/
lang: ms
updated: 2026-11-14
publisher: BroadRouter (a BroadNet site); API by BroadNet Inference, https://inference.broadnet.ai
---

Diterjemahkan daripada bahasa Inggeris dengan bantuan AI. [Baca versi asal dalam bahasa Inggeris](https://broadrouter.com/blog/tokens-per-word-arabic-english/) (dikemas kini 2026-11-16).

# Token setiap perkataan Arab vs Inggeris: mengapa Arab lebih mahal

Oleh pasukan BroadNet Inference · 6 minit bacaan · Diterbitkan 2026-11-14 · Dikemas kini 2026-11-16

Tiada satu angka tunggal: ia bergantung pada tokenizer setiap model. Dalam set data yang diukur oleh BroadRouter, teks bahasa Arab Standard Moden yang sama memerlukan 1.31× (Qwen3.8 27B) hingga 1.77× (GLM 5.3) token terjemahan Inggerisnya, dan 1,000 perkataan prosa Inggeris berjumlah kira-kira 1,290 token secara purata. Ukur nisbah anda sendiri daripada usage.prompt\_tokens.

## Perkara utama

-   Token setiap perkataan ialah sifat tokenizer setiap model, bukan sifat bahasa semata-mata.
-   Penyelidikan pada banyak tokenizer mendapati kandungan yang sama sering memerlukan lebih banyak token dalam bahasa Arab berbanding bahasa Inggeris.
-   Bandingkan teks selari (makna yang sama dalam kedua-dua bahasa), bukan token setiap perkataan: satu perkataan Arab boleh membawa beberapa perkataan Inggeris.
-   Ukur dengan usage.prompt\_tokens pada model yang akan anda gunakan, dengan menolak garis dasar bagi overhed mesej.
-   Baris, tatweel dan tulisan bercampur mengubah kiraan; normalkan input secara konsisten.

**Dalam halaman ini**

1.  Berapa banyak lagi token yang diperlukan bahasa Arab? Angka yang diukur
2.  Apakah yang dilakukan oleh tokenizer?
3.  Mengapakah bahasa Arab sering menggunakan lebih banyak token?
4.  Mengapakah token setiap perkataan metrik yang salah?
5.  Bagaimanakah cara mengukur nisbah anda sendiri?
6.  Apakah maksudnya bagi kos dan konteks?
7.  Bagaimanakah cara mengurangkan kiraan token bahasa Arab?

Jika anda membina produk bahasa Arab di atas API LLM, bil anda dikira dalam token, bukan perkataan. Dan mesej yang sama, apabila ditulis dalam bahasa Arab, sering menjadi lebih banyak token berbanding terjemahan Inggerisnya. Itu menjejaskan kos, had konteks dan kependaman. Artikel ini menerangkan mengapa ia berlaku, mengapa “token setiap perkataan” ialah angka yang mengelirukan, dan cara mengukur nisbah sebenar bagi kandungan anda sendiri pada model yang anda gunakan.

## Berapa banyak lagi token yang diperlukan bahasa Arab? Angka yang diukur

Kami mengukurnya dengan tokenizer sebenar setiap model pada teks selari (makna yang sama dalam bahasa Inggeris dan Arab). Jadual penuh, selang 95% dan kaedahnya ada dalam [set data kecekapan tokenizer](https://broadrouter.com/data/tokenizer-efficiency/) percuma (CSV dan JSON, CC BY 4.0, versi 4, diukur 2026-11-15):

| Tokenizer | Arab ÷ Inggeris, Standard Moden (2,009 ayat FLORES-200) | Arab ÷ Inggeris, dialek Teluk (49 ayat Tatoeba) |
| --- | --- | --- |
| Qwen3.8 27B | 1.31× | 1.21× |
| GPT (o200k) | 1.38× | 1.32× |
| Gemma 4 VL 26B | 1.47× | 1.22× |
| DeepSeek V4.1 Flash | 1.62× | 1.44× |
| GLM 5.3 | 1.77× | 1.57× |

Prosa Inggeris (Wikipedia dan Project Gutenberg) berjumlah kira-kira 127 hingga 132 token setiap 100 perkataan merentasi kelima-limanya. Nisbah bahasa Arab Standard Moden datang daripada 2,009 ayat FLORES-200 yang sama dalam kedua-dua bahasa (teks berita formal, pelancongan dan ensiklopedia daripada artikel Wikimedia berbahasa Inggeris, diterjemah secara profesional). FLORES-200 tiada bahasa Arab Teluk, jadi lajur Teluk menggunakan 49 pasangan ayat pendek Tatoeba dan jauh kurang tepat; halaman set data memberikan selang bagi setiap angka. Tiada satu pun daripada ini trafik anda, jadi gunakan nisbah ini untuk perancangan dan ukur kandungan anda sendiri sebelum membuat bajet. [Pengira token bahasa Arab](https://broadrouter.com/tools/arabic-token-counter/) mengira teks yang ditampal pada setiap tokenizer, dan [token kepada perkataan](https://broadrouter.com/tools/tokens-to-words/) menukar dalam kedua-dua arah.

Untuk menukar nisbah ini kepada wang, [set data kos sebenar mengikut bahasa](https://broadrouter.com/data/real-cost-by-language/) kami mengira harga 1M aksara bagi setiap bahasa pada setiap model yang dapat kami padankan dengan tokenizer yang diukur, merentasi penyedia. Harga setiap token yang lebih murah tidak semestinya bermaksud bil bahasa Arab yang lebih murah.

## Apakah yang dilakukan oleh tokenizer?

Sebelum model melihat teks, tokenizer memecahkannya kepada token daripada kosa kata yang tetap. Kebanyakan tokenizer moden menggunakan kaedah subkata seperti byte-pair encoding (BPE), WordPiece atau SentencePiece, yang diterangkan dalam [ringkasan tokenizer](https://huggingface.co/docs/transformers/tokenizer_summary) Hugging Face. Rentetan yang kerap dalam data latihan menjadi satu token; rentetan yang jarang dipecahkan kepada kepingan lebih kecil, hingga ke bait tunggal jika perlu.

Kosa kata dipelajari daripada korpus latihan. Bahasa yang mendominasi korpus itu mendapat pengekodan paling cekap. Setiap keluarga model mempunyai tokenizer sendiri, jadi model DeepSeek, Qwen, GLM dan Gemma boleh memecahkan ayat Arab yang sama kepada bilangan token yang agak berbeza.

## Mengapakah bahasa Arab sering menggunakan lebih banyak token?

### 1\. Ketidakseimbangan data latihan

Banyak tokenizer dilatih pada teks yang bahasa Inggerisnya terlalu banyak diwakili. Perkataan Inggeris yang biasa menjadi satu token setiap satu; banyak perkataan Arab yang biasa dipecahkan kepada beberapa kepingan. Petrov et al. (2023) mengukur perkara ini merentasi banyak tokenizer dan bahasa dan mendapati perbezaan besar dalam bilangan token yang diperlukan oleh kandungan yang sama, dengan bahasa Inggeris biasanya antara yang paling murah. Ahia et al. (2023) mencapai kesimpulan serupa bagi API komersial dan mencatat kesan langsung pada apa yang dibayar oleh penutur bahasa berbeza.

### 2\. Morfologi bahasa Arab

Bahasa Arab melekatkan kata hubung, kata sendi, kata sandang dan kata ganti terus pada perkataan. Satu perkataan bertulis boleh membawa apa yang bahasa Inggeris sebarkan pada beberapa perkataan:

| Arab | Anggaran Inggeris |
| --- | --- |
| وسيكتبونها | and they will write it |
| بالمدرسة | in the school |
| فقلنا | so we said |

Tokenizer yang belum cukup kerap melihat sesuatu gabungan selalunya memecahkannya kepada kepingan. Itu meningkatkan token setiap **perkataan**, walaupun token setiap **makna** munasabah.

### 3\. Butiran tulisan

Baris (tashkeel), tatweel (aksara pemanjangan), bentuk alif dan hamzah yang berbeza, dan digit Arab-Hindi semuanya aksara atau varian tambahan yang mesti dikodkan oleh tokenizer. Teks Arab dan Rumi yang bercampur, dan Arabizi (bahasa Arab yang ditulis dengan huruf Rumi dan digit), juga boleh dipecahkan dengan cara yang tidak dijangka. Lihat [cara LLM mengendalikan Arabizi](https://broadrouter.com/ms/blog/arabizi-llm-handling/).

## Mengapakah token setiap perkataan metrik yang salah?

Oleh kerana satu perkataan Arab sering menyamai beberapa perkataan Inggeris, “bahasa Arab menggunakan N token setiap perkataan” dan “bahasa Inggeris menggunakan M token setiap perkataan” tidak boleh dibandingkan. Soalan yang lebih adil ialah: **berapakah token yang diperlukan oleh kandungan yang sama dalam setiap bahasa?** Gunakan teks selari, iaitu mesej yang sama ditulis dalam kedua-dua bahasa, dan bandingkan jumlah token. Nisbah itulah yang mengubah bil anda.

Anggaran kasar OpenAI yang sering dipetik, kira-kira empat aksara atau tiga suku perkataan setiap token, diberikan untuk bahasa Inggeris pada tokenizer OpenAI sendiri. Ia tidak terpakai pada bahasa Arab atau keluarga model lain, jadi jangan gunakannya untuk bajet bahasa Arab.

## Bagaimanakah cara mengukur nisbah anda sendiri?

Medan usage ialah kebenaran sebenar: itulah asas bil anda. Skrip ini menghantar teks selari kepada model dan membaca `usage.prompt_tokens`. Ia menolak garis dasar supaya overhed templat chat yang tetap tidak memesongkan teks pendek. Ia menggunakan [Gemma 4 VL 26B](https://broadrouter.com/ms/models/gemma-4-vl-26b/), yang boleh digunakan dengan kredit permulaan percuma dan tidak menaakul; gantikan dengan model yang benar-benar akan anda gunakan.

```python
import os
from openai import OpenAI

client = OpenAI(base_url="https://inference.broadnet.ai/v1", api_key=os.environ["BROADNET_API_KEY"])
MODEL = "broadnet/gemma-4-26b-a4b"

def prompt_tokens(text):
    r = client.chat.completions.create(
        model=MODEL, max_tokens=1,
        messages=[{"role": "user", "content": text}],
    )
    return r.usage.prompt_tokens

baseline = prompt_tokens(".")
pairs = [
    ("Your order has shipped and will arrive on Thursday.",
     "تم شحن طلبك وسيصل يوم الخميس."),
    ("Please send a photo of the invoice so we can check the total.",
     "يرجى إرسال صورة الفاتورة حتى نتحقق من المبلغ الإجمالي."),
]

en_total = ar_total = 0
for en, ar in pairs:
    en_t = prompt_tokens(en) - baseline
    ar_t = prompt_tokens(ar) - baseline
    en_total += en_t; ar_total += ar_t
    print(f"EN {en_t:4d} | AR {ar_t:4d} | ratio {ar_t / max(1, en_t):.2f}")

print(f"Overall Arabic/English token ratio: {ar_total / max(1, en_total):.2f}")
```

Untuk mendapat angka yang boleh dipercayai:

1.  **Gunakan 50–200 pasangan sebenar** daripada domain anda sendiri: mesej sokongan, penerangan produk, invois. Ayat demo pendek terlalu bising.
2.  **Gunakan dialek yang ditulis oleh pengguna anda.** Teks Teluk, Mesir dan Levant boleh ditokenkan secara berbeza daripada bahasa Arab Standard Moden.
3.  **Jalankan bagi setiap model.** Nisbah yang diukur pada satu model hanya sedikit memberitahu tentang model lain. Jika anda memilih antara model, jalankan pasangan yang sama pada setiap satu; [memilih LLM untuk bahasa Arab](https://broadrouter.com/ms/blog/choosing-an-llm-for-arabic/) merangkumi kualiti, yang sama penting dengan kiraan token.
4.  **Ukur output juga.** Minta setiap model menjawab dalam bahasa Arab dan Inggeris dan bandingkan `completion_tokens`. Output lebih mahal setiap token berbanding input pada setiap model, jadi nisbah output mungkin lebih penting.

Jika tokenizer model diterbitkan (contohnya di Hugging Face), anda juga boleh mengira token secara luar talian dengan tokenizer itu. Medan usage API tetap kata putus, kerana ia termasuk templat chat yang digunakan oleh pelayan.

### Membaca hasil

Apabila anda mempunyai nisbah bagi setiap model, tiga corak adalah biasa:

-   **Hampir 1.** Tokenizer mengendalikan bahasa Arab anda dengan baik. Trafik Arab dan Inggeris berkos lebih kurang sama untuk kandungan yang sama.
-   **Jelas melebihi 1.** Bahasa Arab lebih mahal setiap mesej. Ambil kira dalam unjuran dan had konteks, dan pertimbangkan sama ada model lain mengendalikan bahasa Arab anda dengan lebih cekap pada kualiti yang serupa.
-   **Sangat berbeza merentasi sampel anda.** Biasanya tanda kandungan bercampur: teks berbaris, Arabizi, nombor, URL atau kod di dalam mesej bahasa Arab. Pecahkan sampel mengikut jenis dan ukur setiap satu secara berasingan.

Simpan skrip ini dan jalankan semula apabila anda menukar model atau apabila penyedia mengemas kini versi model, kerana tokenizer baharu mengubah setiap kiraan.

## Apakah maksudnya bagi kos dan konteks?

Kos meningkat mengikut token, jadi nisbah bahasa Arab yang lebih tinggi menaikkan bil dengan faktor yang sama bagi bahagian bahasa Arab dalam trafik anda. Mengikut harga BroadNet, input bahasa Arab pada [Qwen3.8 27B](https://broadrouter.com/ms/models/qwen3.8-27b/) berharga $0.175 setiap 1M token dan output $2.17; pada Gemma 4 VL 26B, $0.10 dan $0.22. Harga setiap token sama dalam apa jua bahasa; hanya kiraan token yang berubah. Masukkan nisbah yang anda ukur ke dalam [kaedah anggaran kos bulanan](https://broadrouter.com/ms/blog/estimate-llm-api-cost-before-launch/).

Had konteks mengecil dengan cara yang sama. Gemma 4 VL 26B menerima 32,768 token setiap permintaan; dokumen bahasa Arab yang panjang memenuhinya lebih cepat daripada terjemahan Inggerisnya. DeepSeek V4.1 Flash dan GLM 5.3 menerima 1,048,576.

## Bagaimanakah cara mengurangkan kiraan token bahasa Arab?

-   **Normalkan secara konsisten.** Buang tatweel, dan buang baris jika tugas anda tidak memerlukannya. Gunakan penormalan yang sama pada setiap permintaan supaya cache masih berfungsi.
-   **Ringkaskan arahan.** Prompt sistem yang panjang dihantar semula pada setiap giliran; susunan kata yang padat menjimatkan token dalam kedua-dua bahasa.
-   **Cache awalan yang stabil.** Pada model dengan kadar cache, prompt sistem dan dokumen yang berulang jauh lebih murah. [Cara cache berfungsi](https://broadrouter.com/ms/blog/cached-input-tokens-explained/).
-   **Minta jawapan ringkas.** “Jawab dalam dua ayat” menjimatkan lebih banyak daripada sebarang helah tokenizer.

Untuk pertuturan bahasa Arab dan bukan teks, transkripsi dikenakan harga setiap minit audio, bukan setiap token, jadi tokenisasi tidak menjejaskan bahagian bil itu; lihat [halaman speech-to-text bahasa Arab](https://broadrouter.com/ms/blog/arabic-speech-to-text-api-buyers-guide/).

Alat percuma untuk topik ini (Bahasa Inggeris)

-   [LLM API cost calculator](https://broadrouter.com/tools/llm-api-cost-calculator/) Price a workload on every model at once, with cache hits, reasoning and a flat-plan check.
-   [Flat-rate vs per-token LLM cost calculator](https://broadrouter.com/tools/flat-rate-vs-per-token-calculator/) Break-even between an unlimited plan and paying per token, per agent.
-   [Prompt caching savings calculator](https://broadrouter.com/tools/prompt-caching-calculator/) Bill with and without caching, by prefix share and hit rate.
-   [Prompt token diff](https://broadrouter.com/tools/prompt-token-diff/) Two prompt versions side by side: changed lines, exact token delta and the monthly cost difference.

[Alatan percuma (Bahasa Inggeris)](https://broadrouter.com/tools/)

## Istilah dalam artikel ini

[Token](https://broadrouter.com/ms/glossary/token/)

Token ialah unit teks yang dibaca dan ditulis oleh model bahasa: satu perkataan, sebahagian perkataan, tanda baca atau jujukan bait yang dihasilkan oleh tokenizer model itu. API LLM mengira, mengehadkan dan biasanya mengebil penggunaan dalam token.

[Tokenizer (pengtoken)](https://broadrouter.com/ms/glossary/tokenizer/)

Tokenizer ialah komponen yang menukar teks kepada jujukan ID token integer yang dibaca oleh model bahasa, dan menukar ID yang dijana kembali kepada teks. Setiap model mempunyai tokenizer sendiri, jadi teks yang sama boleh menghasilkan bilangan token yang berbeza pada model yang berbeza.

[Bahasa Arab Standard Moden (MSA)](https://broadrouter.com/ms/glossary/msa/)

Bahasa Arab Standard Moden (MSA) ialah bentuk bahasa Arab yang diseragamkan untuk penulisan, berita, pendidikan dan pertuturan rasmi di seluruh dunia Arab. Ia bukan bahasa harian asli sesiapa: orang bertutur dalam dialek serantau seperti bahasa Arab Mesir atau Teluk dan beralih kepada MSA dalam situasi rasmi.

[Tetingkap konteks (context window)](https://broadrouter.com/ms/glossary/context-window/)

Tetingkap konteks ialah bilangan maksimum token yang boleh dikendalikan oleh model bahasa dalam satu permintaan. Ia meliputi prompt, sejarah perbualan, definisi alatan, imej dan output yang dijana, termasuk token penaakulan. Apa-apa yang tidak muat mesti dipotong, diringkaskan atau dipecahkan kepada beberapa permintaan.

[Arabizi](https://broadrouter.com/ms/glossary/arabizi/)

Arabizi ialah bahasa Arab yang ditulis secara tidak formal dalam huruf Rumi, menggunakan digit untuk bunyi Arab yang tiada padanan Rumi, seperti 3 untuk ع. Ia biasa dalam chat dan media sosial, kebanyakannya dialek, tiada ejaan standard, dan sering bercampur dengan bahasa Inggeris atau Perancis.

[Baris Arab (tashkeel, Arabic diacritics)](https://broadrouter.com/ms/glossary/arabic-diacritics/)

Baris Arab, atau tashkeel, ialah tanda kecil yang ditulis di atas atau di bawah huruf untuk menunjukkan vokal pendek, konsonan berganda dan ketiadaan vokal. Ia pilihan: kebanyakan teks Arab, termasuk berita, meninggalkannya, jadi pembaca dan perisian meneka vokal daripada konteks.

[Penormalan teks Arab (Arabic text normalization)](https://broadrouter.com/ms/glossary/arabic-text-normalization/)

Penormalan teks Arab ialah langkah yang memetakan varian ejaan bagi perkataan yang sama kepada satu bentuk sebelum padanan: membuang baris dan tatweel, menyatukan bentuk alif, dan selalunya memetakan ى kepada ي dan ة kepada ه. Ia digunakan pada kunci carian dan penilaian, bukan pada teks yang anda paparkan.

[Templat chat (chat template)](https://broadrouter.com/ms/glossary/chat-template/)

Templat chat ialah peraturan pemformatan, biasanya ditulis dalam Jinja dan disertakan bersama tokenizer model, yang menukar senarai mesej chat berserta peranannya kepada satu jujukan token yang dijangka oleh model, termasuk token kawalan khasnya. Templat yang salah boleh merosotkan jawapan model dengan teruk.

## Soalan lazim

### Berapakah token bagi satu perkataan bahasa Arab?

Ia bergantung pada model. Dalam set data tokenizer BroadRouter, bahasa Arab Standard Moden memerlukan 183.0 (Qwen3.8 27B) hingga 243.9 (GLM 5.3) token setiap 100 perkataan merentasi lima tokenizer. Bandingkan teks selari dan bukannya perkataan tunggal, dan ukur pada model yang anda gunakan.

### Berapakah token bagi 1,000 perkataan bahasa Inggeris?

Kira-kira 1,269 hingga 1,320 token prosa Inggeris biasa merentasi lima tokenizer dalam set data yang diukur oleh BroadRouter (1,290 secara purata). Teks teknikal, kod dan bahasa lain memerlukan lebih banyak, jadi kira teks anda sendiri.

### Adakah membuang baris mengurangkan token?

Biasanya, kerana baris ialah aksara tambahan yang mesti dikodkan oleh tokenizer. Buang hanya jika tugas anda tidak memerlukannya; bagi al-Quran, puisi atau sebutan, baris membawa makna.

### Adakah peraturan 4 aksara setiap token sah untuk bahasa Arab?

Tidak. OpenAI memberikan anggaran kasar itu untuk teks Inggeris pada tokenizernya sendiri. Ia tidak boleh dipindahkan kepada bahasa Arab atau tokenizer model lain.

### Adakah token bahasa Arab lebih mahal setiap token?

Tidak. Satu token berharga sama tanpa mengira bahasa yang dikodkannya. Bahasa Arab lebih mahal hanya apabila kandungan yang sama dipecahkan kepada lebih banyak token.

## Teruskan membaca

-   [Memilih API LLM untuk bahasa Arab: apa yang perlu diuji](https://broadrouter.com/ms/blog/choosing-an-llm-for-arabic/)
-   [Harga API LLM dijelaskan: input, cache, output dan penaakulan](https://broadrouter.com/ms/blog/llm-api-pricing-explained/)
-   [Kejuruteraan prompt bahasa Arab: laras, RTL, angka dan teks bercampur](https://broadrouter.com/ms/blog/arabic-prompt-engineering/)
-   [Arabizi dan LLM: mengendalikan Franco-Arab dengan nombor 3 dan 7](https://broadrouter.com/ms/blog/arabizi-llm-handling/)
-   [Tambah baris pada teks Arab dengan LLM: prompt, semakan dan DER](https://broadrouter.com/ms/blog/arabic-diacritization-llm/)
-   [Perubahan harga API LLM Oktober 2026: 3 kenaikan, tiada penurunan](https://broadrouter.com/ms/blog/llm-api-price-changes-october-2026/)
-   [Berapa kerap harga API LLM berubah? 3 tahun halaman harga berarkib](https://broadrouter.com/ms/blog/how-often-llm-api-prices-change/)
-   [Panduan: Cara guna OpenAI Python SDK dengan BroadNet Inference](https://broadrouter.com/ms/guides/openai-python-sdk/)

Cuba dengan beban kerja sebenar anda. Akaun baharu bermula dengan kredit US$5 untuk Gemma dan transkripsi. DeepSeek, GLM dan Qwen3.8 memerlukan tambah nilai.

[Mulakan](https://inference.broadnet.ai/account/?utm_source=broadrouter&utm_medium=referral&utm_campaign=ms-blog-tokens-per-word-arabic-english&utm_content=page-cta) ·

**Sumber**

-   [Petrov et al., Language Model Tokenizers Introduce Unfairness Between Languages (arXiv 2305.15425, disemak 2026-11-16)](https://arxiv.org/abs/2305.15425)
-   [Ahia et al., Do All Languages Cost the Same? Tokenization in the Era of Commercial Language Models (arXiv 2305.13707, disemak 2026-11-16)](https://arxiv.org/abs/2305.13707)
-   [Hugging Face Transformers, algoritma tokenisasi (disemak 2026-11-16)](https://huggingface.co/docs/transformers/tokenizer_summary)
-   [OpenAI Help Center, apakah itu token dan cara mengiranya](https://help.openai.com/en/articles/4936856-what-are-tokens-and-how-to-count-them)
-   [Set data kecekapan tokenizer BroadRouter, versi 4 (diukur 2026-11-15)](https://broadrouter.com/data/tokenizer-efficiency/)
-   [Penanda aras penilaian FLORES-200 (Meta, CC BY-SA 4.0), ayat selari di sebalik nisbah MSA (commit tetap, disemak 2026-11-16)](https://github.com/facebookresearch/flores/tree/a6c830c6e1051fb4ac1a44b32358f00463f332bd/flores200)
-   [Rujukan API BroadNet Inference, medan usage (disemak 2026-11-16) (Bahasa Inggeris)](https://inference.broadnet.ai/docs?utm_source=broadrouter&utm_medium=referral&utm_campaign=ms-blog-tokens-per-word-arabic-english&utm_content=sources)
