معرفات

• For example, "Identifier" is represented with 0, "Assignment operator" with 1, "Addition operator" with 2, etc. Tokens are defined often by regular expressions, which are understood by a lexical analyzer generator such as lex.
  على سبيل المثال، يتم تمثيل "المعرفات" بـ0، "عاملا لتعيين" مع1، "مشغلا لإضافة" مع2 ، إلخ .يتم تعريف الرموز في كثير من الأحيان عن طريق التعبيرات العادية، والتي يفهمها مولد محلل معجمية مثلا لقانون.