素短語是指這樣一個(gè)短語,至少含有一個(gè)終結(jié)符,并且,除它自身外不再含任何更小的素短語。
在詞法分析過程中,有時(shí)為了確定詞性,需超前掃描若干個(gè)字符。
執(zhí)行詞法分析的程序。