ما معنى كلمة توكين؟

لفظ توكن Token يصف سلسلة من الرموز لها معنى (نوع) محدد في نحو شكلي . تشكل التوكن حجر البناء في الثروة اللغوية التي يعتد عليها الـ تجزئة.