レクサー

プログラミング言語の語彙解析を行なうプログラム。プログラムとして記述された文字列からキーワードや識別子を認識し、それらに字句(token)を与えてパーサに渡す。