词法分析器实验报告
词法分析器设计
一、
二、 实验目的:
对C语言的一个子集设计并实现一个简单的词法分析器,掌握利用状态转换图设计词法分析器的基本方法。利用该词法分析器完成对源程序字符串的词法分析。输出形式是源程序的单词符号二元式的代码,并保存到文件中。
二、实验内容:
1. 设计原理
词法分析的任务:从左至右逐个字符地对源程序进行扫描,产生一个个单词符号。
理论基础:有限自动机、正规文法、正规式
词法分析器(Lexical Analyzer) 又称扫描器(Scanner):执行词法分析的程
序
2. 词法分析器的功能和输出形式
功能:输入源程序、输出单词符号
程序语言的单词符号一般分为以下五种:关键字、标识符、常数、运算符,界符
3. 输出的单词符号的表示形式:
单词种别用整数编码,关键字一字一种,标识符统归为一种,常数一种,各种符号各一种。
4. 词法分析器的结构
5. 状态转换图实现
三、程序设计
1.总体模块设计
2.各模块设计
(1).首先根据上面单词符号表及ID和NUM的正规定义式,构造出状态转换图;
(2).定义相关的变量和数据结构。关键字作为特殊标识符处理,把它们预先安排在一张表格中(称为关键字表),当扫描程序识别出标识符时,查关键字表。如能查到匹配的单词,则该单词为关键字,否则为一般标识符。关键字表为一个字符串数组,其描述如下:
用以存放单词符号二元式的数据结构可如下定义:
class Word_Analyzer