為語法語義分析提供單詞，使之能把輸入的字符串形式的源程序分割成一個個單詞符號傳遞給語法語義分析，并把分析結(jié)果（基本字，運算符，標(biāo)識符，常數(shù)以及界符）輸出。