Статья
Лексический анализ: токены, регулярные языки, свой лексер с нуля
Первая фаза компилятора: как поток символов превращается в поток токенов, почему для этого хватает конечного автомата, где проходит граница регулярных языков — и полный …