java_cifa.rar_java 词法分析_java 词法分析器_词法分析器 java

作者：未知 来源：未知 加入时间：2004-8-10　开发文档 Java词法分析器 [使用java开发，并且用来分析java源文件] 2003年1月12日 1. 开发工具：rational rose2002 jedition，borland jbuilder6 professional 2. 开发步骤： 1) 基于状态转换图的编译器原理如下： 2)在rose中建立分析器模型框架,根据分析器的状态转换图算法以及算法构造。词法分析器的框架结构如下图所示： (分析器软件包) （词法分析器的控制器结构，包括预编译器，扫描程序，保留字表和单词的类型种别码表以及词法分析器的引导程序和控制程序） （词法分析器的扫描缓冲区和输入缓冲区结构以及获得缓冲区的缓冲工厂） 3)使用rose正向工程产生java框架代码，在jbuilder中进行编辑实现功能代码，生成最终的代码，进行test和debug，最后形成最终的目标程序。具体的实现请参考源代码。编辑和测试如下图所示： （开发环境） （运行结果，详细结果附在后面） 3. 源代码： //lisence head /*Java Accidence Analyser **Author yellowicq **All copyright reserved **Version 1.0 */ //lisence 1) 词法分析器引导文件：main.java package JAccidenceAnalyse; import javax.xml.parsers.*; import org.w3c.dom.*; public class main { /** * @param args * @return void * @roseuid 3D9BAE4702AD */ public static void main(String[] args) { //读取配置文件,得到系统属性 String cfgString[] = new String[4]; try { cfgString = main.loadAACfg("d:\\aaCfg.xml"); } catch (Exception e) { e.printStackTrace(System.err); } //设置待读文件名 //////////////////////////////////////////////////// //保留字表文件 String reserveFileName = cfgString[0]; //类型种别码表文件 String classFileName = cfgString[1]; //需要分析的源文件 String sourceFileName = cfgString[2]; //输出文件 String outputFileName = cfgString[3]; //////////////////////////////////////////////////// //创建词法分析器 AccidenceAnalyser aa = new AccidenceAnalyser(); aa.setFilesPath(reserveFileName, classFileName, sourceFileName, outputFileName); //建立所需要的文件对象 //初始化词法分析器 aa.initAA(); //初始化关键字表 aa.keyWordTable.initKeyWordTable(); //初始化类型种别码表 aa.classIdentity.initClassIdentityTable(); //开始进行词法分析 aa.startAA(); //分析完毕 } //读取配置文件 private static String[] loadAACfg(String name) throws Exception { String cfgString[] = new String[4]; /*解析xml配置文件*/ try { /*创建文档工厂*/ DocumentBuilderFactory factory = DocumentBuilderFactory.newInstance(); /*创建文档解析器*/ DocumentBuilder builder = factory.newDocumentBuilder(); /*解析配置文件*/ Document doc = builder.parse(name); /*规范化文档*/ doc.normalize(); /*查找接点表*/ NodeList nlists = doc.getElementsByTagName("FilePath"); for (int i = 0; i < nlists.getLength(); i++) { Element item = (Element) nlists.item(i); //取得需要的配置属性 /******************/ cfgString[0] = item.getElementsByTagName("ReserveFileName").item(0). getFirstChild().getNodeValue().trim(); /******************/ cfgString[1] = item.getElementsByTagName("ClassFileName").item(0). getFirstChild().getNodeValue().trim(); /******************/ cfgString[2] = item.getElementsByTagName("SourceFileName").item(0). getFirstChild().getNodeValue().trim(); /******************/ cfgString[3] = item.getElementsByTagName("OutputFileName").item(0). getFirstChild().getNodeValue().trim(); /******************/ } } catch (Exception e) { e.printStackTrace(); throw new Exception("[ERROR]加载配置文件 " + name + " 错误!"); } //返回属性数组 return cfgString; } } 2） 词法分析器主程序：AccidenceAnalyser.java //Source file: d:\\JAccidenceAnalyse\\AccidenceAnalyser.java package JAccidenceAnalyse; import java.io.*; import java.util.*; import JAccidenceAnalyse.Buffer.*; public class AccidenceAnalyser { private java.io.File SourceFile; private java.io.File ReserveFile; private java.io.File ClassFile; private java.io.File OutputFile; public Pretreatment pretreatment; public KeyWordTable keyWordTable; public ClassIdentity classIdentity; public Scaner scaner; public ConcreteScanBufferFactory csbFactory; /** * @roseuid 3D9BB93303D0 */ public AccidenceAnalyser() { System.out.println("[INFOR]已经建立词法分析器!"); } /** * @roseuid 3D9BAEF9029F */ public void initAA() { //创建缓冲工厂 this.csbFactory = new ConcreteScanBufferFactory(); //创建字符串扫描对象 scaner = new Scaner(this); //创建pre处理对象 pretreatment = new Pretreatment(SourceFile, this); //创建关键字表对象 keyWordTable = new KeyWordTable(ReserveFile); //创建对象种别码表对象 classIdentity = new ClassIdentity(ClassFile); System.out.println("[INFOR]已经初始化词法分析器!"); } /** * @roseuid 3D9BAF12022D */ public void setFilesPath(String reserveFileName, String ClassFileName, String sourceFileName, String outputFileName) { //创建文件对象 SourceFile = new java.io.File(sourceFileName); //创建文件对象 ReserveFile = new java.io.File(reserveFileName); //创建文件对象 ClassFile = new java.io.File(ClassFileName); //创建文件对象 OutputFile = new java.io.File(outputFileName); //如果文件已经存在,先删除,然后建立新文件 if (OutputFile.exists()) { OutputFile.delete(); } try { OutputFile.createNewFile(); } catch (Exception e) { e.printStackTrace(System.err); } try { //创建文件随机读取对象 java.io.RandomAccessFile ROutputFile = new java.io.RandomAccessFile(this. OutputFile, "rw"); //提示信息 ROutputFile.write("//////////////////////////////////////////////////\n". getBytes()); ROutputFile.write( ("//JAccidenceAnalyser version " + getVersion() + " design by yellowicq//\n").getBytes()); ROutputFile.write("//java词法分析器//////////////\n".getBytes()); ROutputFile.write("//使用java语言开发////////////////////////////////////\n". getBytes()); ROutputFile.write("//////////////////////////////////////////////////\n". getBytes()); ROutputFile.write("词法分析结果如下:\n".getBytes()); //关闭文件流 ROutputFile.close(); } catch (Exception e) { e.printStackTrace(System.err); } } /** * @roseuid 3D9BAFAB0089 */ public void startAA() { //从预处理开始词法分析 this.pretreatment.startPretreatment(); } /** * @roseuid 3D9BB0B40383 */ public void outputAccidence(String outputString) { //把分析出来的单词写入文件 outputString = "\n[第" + this.pretreatment.fileRow + "行]\n" + outputString; try { //创建文件随机读取对象 java.io.RandomAccessFile ROutputFile = new java.io.RandomAccessFile(this. OutputFile, "rw"); //移动指针到文件末尾 ROutputFile.seek(ROutputFile.length()); //Start appending! ROutputFile.write(outputString.getBytes()); //关闭文件流 ROutputFile.close(); } catch (Exception e) { e.printStackTrace(System.err); } //将分析的单词结果输出到终端 System.out.print(outputString); } /** * @roseuid 3D9BB0CE02C2 */ public void controlThread() { //控制扫描器启动扫描 scaner.controlThread(); } //获得版本号 public String getVersion() { return "1.0"; } } 3） 预处理子程序：Pretreatment.java //Source file: d:\\JAccidenceAnalyse\\Pretreatment.java package JAccidenceAnalyse; import JAccidenceAnalyse.Buffer.*; import java.io.*; public class Pretre