الرئيسية
»
المستوى الخامس: المعرفة اللغوية (مُهيكلة للمعالجة اللغوية)
»
الصرف (حسابي)
١.
المورفيمات واللاحقات والجذور
Morphemes, affixes, roots
٢.
التصريف مقابل الاشتقاق
Inflection vs. derivation
٣.
الصرف محدود الحالة
Finite-State Morphology
٤.
محللات الصرف
Morphological analyzers
٥.
الاستخلاص مقابل التصريف
Stemming vs. Lemmatization
٦.
التقطيع
Tokenization (word, subword, character)
٧.
ترميز زوج البايت
Byte-Pair Encoding (BPE)
٨.
تقطيع WordPiece و Unigram
WordPiece & Unigram tokenization