`
abruzzi
  • 浏览: 452985 次
  • 性别: Icon_minigender_1
  • 来自: 西安
社区版块
存档分类
最新评论

jjTree解析

阅读更多

这篇文章可以算是这篇小型桌面计算器的实现(javacc) 的续。

 

可以这么说,使用javacc作分析器生成器,如果没有用到jjTree,那么就是对语义分析 的过程理解不够深入。如果用到了jjTree而且用好了,那么对编译原理,BNF等的理解才算是比较到位了。

jjTree中最重要的概念是Node接口,所有的非终结符都可以规约 为一个节点。这个节点一般来讲是实现了Node接口的节点类
其中主要有这样几个方法:

……
  /** This method tells the node to add its argument to the node's
    list of children.  */
  public void jjtAddChild(Node n, int i);

  /** 返回孩子节点,下标从0开始,从左到右 */
  public Node jjtGetChild(int i);

  /** 返回字节点个数 */
  int jjtGetNumChildren();

……

 

在本文所举的例子中,每个节点还要实现这样一个接口中声明的方法:

void interpret()

这个方法中为每个节点具体的计算过程。

 

jjTree处理的脚本(jjTree规则列表)以jjt结尾,这个文件通过jjtree工具可以生成.jj文件,然后用javacc编译.jj文件即可生成分析器生成器的java代码,然后于一些辅助解析的类进行编译,从而最终完成整个脚本引擎。

jjTree有什么用?
这个是最核心的问题了,我们都知道jjTree的作用是为了将终结符 通过规则规约非终结符节点 。但是,规约的目的又是什么呢?其实,如果你的目标是简单的行解析器的话,根本不需要jjTree。但是,如果需要做一些比较有规模的脚本解析器,比如支持if,while等代码块的话,就需要解析器将这些临时的状态记录下来,那就必须用到jjTree了。

加入了语法树 之后,解析器就需要做出一些修改了,比如需要加入全局的符号表,堆栈等数据结构,以方便规约出非终结符后再做动作时可以取出这些数据。当然,如果你的脚本引擎支持IO的话,这些全局的流描述符也应该和符号表,堆栈放在一起,比如一个单独的类中。

涉及到使用jjTree的项目,即使是演示目的的,一般也比较大,所以,这篇文章中给出的都是一些片段,如果需要,我可以在blog中做一个小系列来说。

比如,看一个例子:

/** Conditional or expression. */
void ConditionalOrExpression() #void :
{}
{
  ConditionalAndExpression()
  ( "||" ConditionalAndExpression() #OrNode(2) )*
}
 



上边这段中 #void意思为当遇到ConditionalOrExpression规则时,不生成节点(不规约),而#OrNode(2)则表示如果发现有恰好2个ContionalAndExpression()规则,则规约到一个OrNode节点(需要在外部写一个ASTOrNode类)。

而在ASTOrNode类中,会有下面的动作定义

  public void interpret()
  {
     jjtGetChild(0).interpret();

     if (((Boolean)stack[top]).booleanValue())
     {
        stack[top] = new Boolean(true);
        return;
     }

     jjtGetChild(1).interpret();
     stack[--top] = new Boolean(((Boolean)stack[top]).booleanValue() ||
                                ((Boolean)stack[top + 1]).booleanValue());
  }
 


在语法解析时,当规约出非终结符后,设置ASTOrNode父类的children的数组,然后在ASTOrNode先取出这个数组中的第一个Node进行
递归解析,完成后取出第二个Node进行解析,最后,将这两个解析后的结果进行bool的或运算。整个过程很自然,计算过程放在外部的单独
的类中进行。

再看一个例子:

/** A block. */
void Block() :
{}
{
  "{" ( Statement() )* "}"
}
 


用花括号括起来的一些代码表示一个块,怎么解析这个快呢?在ASTBlock中,有这样的运算过程:

  public void interpret()
  {
     int i, k = jjtGetNumChildren();//取出代码块中的代码条数

     for (i = 0; i < k; i++)
        jjtGetChild(i).interpret();//递归解析

  }
 


取出代码块中的代码条数,然后依次执行,如果遇到其他的Node,则递归调用这个Node上的interpret过程,从而执行整个代码块。

希望这篇文章可以说明jjTree的运行机制,但是由于规模所限,有些地方可能还是不太清晰。欢迎留言,我会尽快在blog上写一个小的系列,谢谢!

分享到:
评论
5 楼 95222 2009-10-20  
    
大哥啊,我遇到jjtree的问题了,求解啊。就是要解析一条字符串,里面有"AND" "OR" "NOT" ,并且有括号,要求有优先级。是搜索用的。
    
我搞了好几天了,就是一点头目都没有,眼看截止日期将要到了,已经上了绝路了,如果没时间给我写个源码,指点一下也感激涕零啊。又或者写个教程普度众生啊   
4 楼 abruzzi 2009-09-15  
风之巽 写道
您好!请问关于符号表的建立有没有相关的例子啊?
最近看论文关于增量编译的,提到了复用子树的概念,就是将上一次分析得到的树中的可复用的结点直接移进解析栈,而不用一个个终结符来分析。。。 
可是javacc中关于jjtree我还是很不了解,想要建立解析表之类的也不知道怎么样开始,能帮忙指点下吗??谢谢您!

javacc的例子中有一个interpreter,解释一个叫SPL的小语言(也就是我这篇文章给出的例子的来源),其中用到了符号表,其实就是一个hashtable,当遇到终结符后,将键值对插入其中。其实就是一个全局的表结构,可以从中根据名称取出值来。另,不用这么客气。
3 楼 风之巽 2009-09-15  
您好!请问关于符号表的建立有没有相关的例子啊?
最近看论文关于增量编译的,提到了复用子树的概念,就是将上一次分析得到的树中的可复用的结点直接移进解析栈,而不用一个个终结符来分析。。。 
可是javacc中关于jjtree我还是很不了解,想要建立解析表之类的也不知道怎么样开始,能帮忙指点下吗??谢谢您!
2 楼 abruzzi 2009-08-15  
952222 写道
  jjTree好难喔。跟普通的jj貌似隔了好几个量级。晕。。。看了良久,不懂。。。

呵呵,jjTree其实就是用于写脚本分析器(包含规约的语言)的时候要用到,如果只是做解析(比如配置文件之类的)就不需要了,其实主要是编译技术方面的原理,看一看语法分析和语义分析部分,应该就好理解了。
1 楼 952222 2009-08-15  
  jjTree好难喔。跟普通的jj貌似隔了好几个量级。晕。。。看了良久,不懂。。。

相关推荐

    javacc+jjtree使用教程

    JavaCC和JJTree是用于构建解析器和抽象语法树(AST)的工具,常用于编译器设计和解析复杂语法的场景。它们是Java语言的版本,类似于其他编程语言中的YACC和LEX。 1. **JavaCC**: - JavaCC(Java Compiler ...

    159-其他资源-JavaCC、解析树和 XQuery 语法,第 2 部分1

    JJTree 是 JavaCC 的伙伴工具,它可以提供一个解析器,该解析器在运行时的主要工作不是执行嵌入的 Java 操作,而是构建正在解析的表达式的独立解析树表示。 使用 JJTree 可以独立于生成该解析树的解析代码,捕捉在...

    使用Javacc做的解释器(超详细)

    在JavaCC中,我们使用JJTree工具生成抽象语法树的节点类,并编写语法规则(在JJ文件中)。这些规则描述了语言的结构,例如表达式、语句等。JavaCC会自动生成解析器代码,处理输入的词法单元并构建AST。 以下是一些...

    javacc基础知识.pdf

    在本文中,我们将探讨JavaCC的基础知识,包括如何使用它来构建解析器,并通过实例展示如何使用JJTree辅助工具生成解析树。 首先,让我们理解BNF和EBNF。它们是形式语言的描述方法,用于定义文法规则,使得解析器...

    javacc-5.0.rar

    这个工具基于经典的LL(k)和LR(1)解析技术,并且支持自定义语法和语义动作。在JavaCC 5.0版本中,用户可以构建复杂、高性能的解析器来处理特定的语言或协议。 JavaCC的工作原理是通过读取一个名为JavaCC语法规范(....

    javaccjjtree使用教程借鉴.pdf

    JavaCC和JJTree是两个强大的工具,用于生成Java解析器和抽象语法树(AST)。JavaCC(Java Compiler Compiler)是一个自动生成词法分析器和语法分析器的工具,而JJTree是JavaCC的一个扩展,专注于生成AST。 1. **...

    javacc

    7. **JJTree预处理器**:JavaCC附带了一个名为JJTree的工具,用于生成抽象语法树(AST)。这有助于处理复杂的语法结构,便于后续的代码生成和分析。 8. **灵活性**:JavaCC允许用户选择是否生成线程安全的解析器,...

    javacc:JavaCC-解析器生成器,用于从语法构建解析器。 它可以用Java,C ++和C#生成代码

    除了解析器生成器本身之外,JavaCC还提供其他与解析器生成相关的标准功能,例如树构建(通过JavaCC附带的称为JJTree的工具),操作和调试。 一旦生成,运行JavaCC解析器所需的全部就是Java运行时环境(JRE)。 本...

    javaCC5.0压缩包

    8. **JJTree工具**:JavaCC附带的JJTree工具用于生成AST节点类,使得用户可以自定义AST的结构和行为。 9. **可扩展性**:JavaCC允许用户插入自定义的Java代码,可以在解析过程中执行任意的Java逻辑,增强了工具的...

    javacc4.1源码

    这个工具主要用于解析符合特定语法规则的输入,例如编程语言的源代码,从而实现编译器、解释器或任何需要处理结构化文本的应用程序。在JavaCC4.1版本中,它提供了更高效、更灵活的解析功能,并且对早期版本进行了...

    javacc-6.0官方版

    JavaCC(Java Compiler Compiler)是一种强大的词法分析器和语法分析器生成器,它允许开发者用Java语言定义文法,并自动生成相应的解析器。在JavaCC 6.0这个版本中,用户可以利用其功能来构建复杂的解析系统,用于...

    自己编写的100个javacc例子程序

    `JJTreeExamples`则可能是一系列使用JavaCC的扩展工具JJTree创建的语法树示例,JJTree可以将解析树转换为抽象语法树(AST),方便进行进一步的代码生成或分析。 通过研究这些示例,你可以学习到以下知识点: 1. **...

    javacc-6.0

    6. **JJTree工具**:JavaCC附带的JJTree工具可以生成抽象语法树的Java类,便于对解析结果进行进一步处理。 7. **执行脚本**:在“javacc-6.0”中包含的5.0版本执行脚本可能用于不同平台的兼容性处理,或者简化构建...

    javacc基础知识参考.pdf

    文档中还提到了`JJTree`,这是JavaCC的一个组件,它通过将语法树的节点直接生成为Java类来简化了语法树的处理。`XQuery`是W3C推荐的一种XML查询语言,它允许用户查询XML文档中的信息。`XPath`是另一种用于XML文档的...

    javacc学习心得.doc

    jjTree 用来处理 jjt 文件,生成树节点代码和 jj 文件,然后再通过 javaCC 生成解析代码;jjDoc 根据 jj 文件生成 bnf 范式文档(html)。 jjTree 是 JavaCC 的一个重要工具,定义了 Java 接口节点,所有分析树节点...

    javaCCeclipse插件

    生成的解析器通常包含一个或多个 `jjtree` 生成的非终结符类和一个 `Parser` 主类,用于实际的解析工作。 2. **Eclipse 插件集成** JavaCC Eclipse 插件提供了一种无缝的方式,在 Eclipse 开发环境中使用 JavaCC。...

    javacc文件夹版本

    3. **JJTree(语法树生成器)**: 可选组件,用于生成抽象语法树,便于后续处理和代码生成。 4. **用户定义的非终结符和动作**: 用户可以在JJT文件中定义自己的非终结符,同时插入Java代码作为动作,这些动作会在解析...

    javacc-4.0

    JavaCC(Java Compiler Compiler)是一种强大的词法分析器和语法分析器生成器,它能够根据用户定义的语法规则自动生成解析器的Java源代码。这个工具广泛用于构建解析器和编译器,特别是处理复杂语法结构的项目,如...

    javacc实现cmm语法分析

    JavaCC(Java Compiler Compiler)是一种广泛使用的工具,用于生成解析器和词法分析器,尤其在处理复杂的语法和解析任务时。在这个特定的场景中,我们关注的是如何使用JavaCC来实现CMM(可能是“计算机动画建模语言...

Global site tag (gtag.js) - Google Analytics