الرموز (tokens) والتتابعات اللغوية (n-grams) والسياق

لا يقرأ نموذج اللغة النص حرفا حرفا، ولا بالضرورة كلمة كلمة: بل يقسّمه إلى رموز (tokens)، وحدات قد تكون كلمة كاملة، أو جزءا من كلمة، أو حتى حرفا واحدا. يُسمى هذا التقسيم ترميز الكلمات الفرعية (subword tokenization). خذ كلمة "unwatched"…

access denied :: authentication required

البقية مخصّصة للأعضاء

أنشئ حسابًا لفتح الدورة كاملة، وحفظ تقدّمك، واجتياز الاختبارات المقيَّمة.

أول درسين من هذه الدورة متاحان للجميع.

إنشاء حساب مجاني تسجيل الدخول

السابق الدرس التالي