Lexikální analyzátor: Příklad
Zdrojový program:
Position := Initial + Rate * 60
Tokeny:
id
EPosition
:=
id
EInitial
+
id
 ERate
*
int
60
Position
:=
Initial
+
Rate
*
60
Lexémy:
7/17