1 在Lombok经常用,但是你知道它的原理是什么吗?和Lombok经常用,但是你知道它的原理是什么吗?(二)两篇文章中介绍了关于Lombok的底层原理,其实总结为一句话来说就是在编译期通过改变抽象语。..
1 在Lombok经常用,但是你知道它的原理是什么吗?和Lombok经常用,但是你知道它的原理是什么吗?(二)两篇文章中介绍了关于Lombok的底层原理,其实总结为一句话来说就是在编译期通过改变抽象语法树而实现的。上面两篇文章已经讲了抽象语法树的相关知识点,如果有不清楚的可以看一下。
本篇涉及到的所有代码都在github上面有 在网上关于如何修改Java的抽象语法树的相关API文档并不多,于是本篇记录一下相关的知识点,以便随后查阅。
一、Java中的屠龙之术 1.1 JCTree的介绍 JCTree是语法树元素的基类,包含一个重要的字段pos,该字段用于指明当前语法树节点(JCTree)在语法树中的位置,因此我们不能直接用new关键字来创建语法树节点,即使创建了也没有意义。此外,结合访问者模式,将数据结构与数据的处理进行解耦,部分源码如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 public abstract class JCTree implements Tree , Cloneable, DiagnosticPosition { public int pos = -1 ; ... public abstract void accept (JCTree.Visitor visitor) ; ... } ``` 我们可以看到JCTree是一个抽象类,这里重点介绍几个JCTree的子类 JCStatement:声明语法树节点,常见的子类如下 JCBlock:语句块语法树节点 JCReturn:return 语句语法树节点 JCClassDecl:类定义语法树节点 JCVariableDecl:字段/变量定义语法树节点 JCMethodDecl:方法定义语法树节点 JCModifiers:访问标志语法树节点 JCExpression:表达式语法树节点,常见的子类如下 JCAssign:赋值语句语法树节点 JCIdent:标识符语法树节点,可以是变量,类型,关键字等等 #### 1.2 TreeMaker介绍 TreeMaker用于创建一系列的语法树节点,我们上面说了创建JCTree不能直接使用new 关键字来创建,所以Java为我们提供了一个工具,就是TreeMaker,它会在创建时为我们创建的JCTree对象设置pos字段,所以必须使用上下文相关的TreeMaker对象来创建语法树节点。 具体的API介绍可以参照,TreeMakerAPI,接下来着重介绍一下常用的几个方法。 ##### TreeMaker.Modifiers `TreeMaker.Modifiers` 方法用于创建访问标志语法树节点(JCModifiers),源码如下 ```java public JCModifiers Modifiers (long flags) { return Modifiers(flags, List.< JCAnnotation >nil());
}
1 2 3 4 5 6 public JCModifiers Modifiers (long flags, List<JCAnnotation> annotations) { JCModifiers tree = new JCModifiers (flags, annotations); boolean noFlags = (flags & (Flags.ModifierFlags | Flags.ANNOTATION)) == 0 ; tree.pos = (noFlags && annotations.isEmpty()) ? Position.NOPOS : pos; return tree;
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 flags:访问标志 annotations:注解列表 其中flags可以使用枚举类 `com.sun.tools.javac.code.Flags` 来表示,例如我们可以这样用,就生成了下面的访问标志了。 treeMaker.Modifiers(Flags.PUBLIC + Flags.STATIC + Flags.FINAL); public static final ``` ##### TreeMaker.ClassDef TreeMaker.ClassDef用于创建类定义语法树节点(JCClassDecl),源码如下: ```java public JCClassDecl ClassDef(JCModifiers mods,
Name name,
1 List<JCTypeParameter> typarams,
JCExpression extending,
1 2 3 List <JCExpression> implementing,List <JCTree> defs) { JCClassDecl tree = new JCClassDecl(mods,
name,
typarams,
extending,
implementing,
1 2 3 defs, null); tree.pos = pos;
}
`mods:访问标志,可以通过```text TreeMaker.Modifiers
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 name:类名 typarams:泛型参数列表 extending:父类 implementing:实现的接口 defs:类定义的详细语句,包括字段、方法的定义等等 ##### TreeMaker.MethodDef TreeMaker.MethodDef用于创建方法定义语法树节点(JCMethodDecl),源码如下 public JCMethodDecl MethodDef(JCModifiers mods, JCExpression restype, List<JCVariableDecl> params, List<JCExpression> thrown, JCBlock body, JCExpression defaultValue) { JCMethodDecl tree = new JCMethodDecl(mods, name, restype, thrown, body, defaultValue, } public JCMethodDecl MethodDef(MethodSymbol m, Type mtype, JCBlock body) { return (JCMethodDecl) new JCMethodDecl( Modifiers(m.flags(), Annotations(m.getAnnotationMirrors())), m.name, Type(mtype.getReturnType()), TypeParams(mtype.getTypeArguments()), Params(mtype.getParameterTypes(), m), Types(mtype.getThrownTypes()), body, null, m).setPos(pos).setType(mtype); } ``` mods:访问标志 name:方法名 restype:返回类型 params:参数列表 thrown:异常声明列表 body:方法体 ```python defaultValue:默认方法(可能是interface中的哪个default)
m:方法符号
mtype:方法类型。包含多种类型,泛型参数类型、方法参数类型、异常参数类型、返回参数类型。
TreeMaker.VarDef TreeMaker.VarDef用于创建字段/变量定义语法树节点(JCVariableDecl),源码如下
1 public JCVariableDecl VarDef (JCModifiers mods,
JCExpression vartype,
1 2 JCExpression init) { JCVariableDecl tree = new JCVariableDecl (mods, name, vartype, init, null );
}
1 2 3 4 public JCVariableDecl VarDef (VarSymbol v, return (JCVariableDecl) new JCVariableDecl ( Modifiers(v.flags(), Annotations(v.getAnnotationMirrors())),
v.name,
init,
1 v).setPos(pos).setType(v.type);
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 name:参数名称 vartype:类型 init:初始化语句 v:变量符号 ##### TreeMaker.Ident TreeMaker.Ident用于创建标识符语法树节点(JCIdent),源码如下 public JCIdent Ident(Name name) { JCIdent tree = new JCIdent(name, null); } public JCIdent Ident(Symbol sym) { return (JCIdent)new JCIdent((sym.name != names.empty) ? sym.name : sym.flatName(), sym) .setPos(pos) .setType(sym.type); } public JCExpression Ident(JCVariableDecl param) { return Ident(param.sym); } ``` ##### TreeMaker.Return TreeMaker.Return用于创建return语句(JCReturn),源码如下 ```java public JCReturn Return(JCExpression expr) { JCReturn tree = new JCReturn(expr);
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 ##### TreeMaker.Select TreeMaker.Select用于创建域访问/方法访问(这里的方法访问只是取到名字,方法的调用需要用TreeMaker.Apply)语法树节点(JCFieldAccess),源码如下 public JCFieldAccess Select(JCExpression selected, Name selector) { JCFieldAccess tree = new JCFieldAccess(selected, selector, null); } public JCExpression Select(JCExpression base, Symbol sym) { return new JCFieldAccess(base, sym.name, sym).setPos(pos).setType(sym.type); } `selected:```text . ``` 运算符左边的表达式 selector: `.` 运算符右边的表达式 下面给出一个例子,一语句生成的Java语句就是二语句 ```python 一. TreeMaker.Select(treeMaker.Ident(names.fromString("this")), names.fromString("name"));
二. this.name
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 ##### TreeMaker.NewClass TreeMaker.NewClass用于创建new语句语法树节点(JCNewClass),源码如下: public JCNewClass NewClass(JCExpression encl, List<JCExpression> typeargs, JCExpression clazz, List<JCExpression> args, JCClassDecl def) { JCNewClass tree = new JCNewClass(encl, typeargs, clazz, args, def); } ``` encl:不太明白此参数的含义,我看很多例子中此参数都设置为null typeargs:参数类型列表 clazz:待创建对象的类型 args:参数列表 ```python def:类定义
TreeMaker.Apply TreeMaker.Apply用于创建方法调用语法树节点(JCMethodInvocation),源码如下:
1 public JCMethodInvocation Apply (List<JCExpression> typeargs,
JCExpression fn,
1 2 List<JCExpression> args) { JCMethodInvocation tree = new JCMethodInvocation(typeargs, fn, args);
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 fn:调用语句 ##### TreeMaker.Assign TreeMaker.Assign用户创建赋值语句语法树节点(JCAssign),源码如下: ublic JCAssign Assign(JCExpression lhs, JCExpression rhs) { JCAssign tree = new JCAssign(lhs, rhs); } ``` lhs:赋值语句左边表达式 rhs:赋值语句右边表达式 ##### TreeMaker.Exec TreeMaker.Exec用于创建可执行语句语法树节点(JCExpressionStatement),源码如下: ```java public JCExpressionStatement Exec(JCExpression expr) { JCExpressionStatement tree = new JCExpressionStatement(expr);
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 ##### TreeMaker.Block TreeMaker.Block用于创建组合语句的语法树节点(JCBlock),源码如下: public JCBlock Block(long flags, List<JCStatement> stats) { JCBlock tree = new JCBlock(flags, stats); } ``` stats:语句列表 #### 1.3 com.sun.tools.javac.util.List介绍 在我们操作抽象语法树的时候,有时会涉及到关于List的操,是这个List不是我们经常使用的 `java.util.List` 而是 `com.sun.tools.javac.util.List` ,这个List比较奇怪,是一个链式的结构,有头结点和尾节点,但是只有尾节点是一个List,这里作为了解就行了。 ```java public class List<A> extends AbstractCollection<A> implements java.util.List<A> { public A head; public List<A> tail; private static final List<?> EMPTY_LIST = new List<Object>((Object)null, (List)null) { public List<Object> setTail(List<Object> var1) { throw new UnsupportedOperationException();
}
1 2 public boolean isEmpty () { return true ;
}
};
1 2 3 List(A head, List<A> tail) { this.tail = tail; this.head = head;
}
1 2 public static <A> List<A> nil () { return EMPTY_LIST;
}
1 2 public List<A> prepend (A var1) { return new List (var1, this );
}
1 2 public List<A> append (A var1) { return of(var1).prependList(this );
}
1 2 public static <A> List<A> of (A var0) { return new List (var0, nil());
}
1 2 public static <A> List<A> of (A var0, A var1) { return new List (var0, of(var1));
}
1 2 public static <A> List<A> of (A var0, A var1, A var2) { return new List (var0, of(var1, var2));
}
1 2 public static <A> List<A> of (A var0, A var1, A var2, A... var3) { return new List (var0, new List (var1, new List (var2, from(var3))));
}
...
}
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 #### 1.4 com.sun.tools.javac.util.ListBuffer 由于 `com.sun.tools.javac.util.List` 使用起来不方便,所以又在其上面封装了一层,这个封装类是 `ListBuffer` ,此类的操作和我们平时经常使用的 `java.util.List` 用法非常类似。 public class ListBuffer<A> extends AbstractQueue<A> { public static <T> ListBuffer<T> of(T x) { ListBuffer<T> lb = new ListBuffer<T>(); lb.add(x); return lb; } /** The list of elements of this buffer. */ private List<A> elems; /** A pointer pointing to the last element of 'elems' containing data, * or null if the list is empty. */ private List<A> last; /** The number of element in this buffer. */ private int count; /** Has a list been created from this buffer yet? */ private boolean shared; /** Create a new initially empty list buffer. */ public ListBuffer() { clear(); } /** Append an element to buffer. */ public ListBuffer<A> append(A x) { x.getClass(); // null check if (shared) copy(); List<A> newLast = List.<A>of(x); if (last != null) { last.tail = newLast; last = newLast; } else { elems = last = newLast; } count++; return this; } ........ } ``` #### 1.5 com.sun.tools.javac.util.Names介绍 ```python 这个是为我们创建名称的一个工具类,无论是类、方法、参数的名称都需要通过此类来创建。它里面经常被使用到的一个方法就是 `fromString()` ,一般使用方法如下所示。 Names names = new Names() names. fromString("setName");
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 #### 1.6 实战演练 上面我们大概了解了如何操作抽象语法树,接下来我们就来写几个真实的案例加深理解。 ##### 变量相关 在类中我们经常操作的参数就是变量,那么如何使用抽象语法树的特性为我们操作变量呢?接下来我们就将一些对于变量的一些操作。 ###### 生成变量 例如生成 `private String age;` 这样一个变量,借用我们上面讲的 `VarDef` 方法 // 生成参数 例如:private String age; treeMaker.VarDef(treeMaker.Modifiers(Flags.PRIVATE), names.fromString("age"), treeMaker.Ident(names.fromString("String")), null); ``` ###### 对变量赋值 ```java 例如我们想生成 `private String name = "BuXueWuShu"` ,还是利用 `VarDef` 方法 // private String name = "BuXueWuShu" treeMaker.VarDef(treeMaker.Modifiers(Flags.PRIVATE),names.fromString("name"),treeMaker.Ident(names.fromString("String")),treeMaker.Literal("BuXueWuShu"))
1 2 3 4 5 6 7 8 9 10 11 12 ###### 两个字面量相加 例如我们生成 `String add = "a" + "b";` ,借用我们上面讲的 `Exec` 方法和 `Assign` 方法 // add = "a"+"b" treeMaker.Exec(treeMaker.Assign(treeMaker.Ident(names.fromString("add")),treeMaker.Binary(JCTree.Tag.PLUS,treeMaker.Literal("a"),treeMaker.Literal("b")))) ``` ```python ###### +=语法 例如我们想生成 `add += "test"` ,则和上面字面量差不多。 // add+="test" treeMaker.Exec(treeMaker.Assignop(JCTree.Tag.PLUS_ASG, treeMaker.Ident(names.fromString("add")), treeMaker.Literal("test")))
1 2 3 4 5 6 7 8 9 10 11 12 13 14 ###### ++语法 例如想生成 `++i` treeMaker.Exec(treeMaker.Unary(JCTree.Tag.PREINC,treeMaker.Ident(names.fromString("i")))) ``` ##### 方法相关 我们对于变量进行了操作,那么基本上都是要生成方法的,那么如何对方法进行生成和操作呢?我们接下来演示一下关于方法相关的操作方法。 ###### 无参无返回值 我们可以利用上面讲到的 `MethodDef` 方法进行生成 /* 无参无返回值的方法生成 ```java public void test(){
}
*/
1 2 3 // 定义方法体 ListBuffer<JCTree.JCStatement> testStatement = new ListBuffer<>(); JCTree.JCBlock testBody = treeMaker.Block(0, testStatement.toList());
1 2 3 4 5 JCTree.JCMethodDecl test = treeMaker.MethodDef( treeMaker.Modifiers(Flags.PUBLIC), names.fromString("test" ), treeMaker.Type(new Type .JCVoidType()), com.sun.tools.javac.util.List.nil(),
testBody, // 方法体
null
);
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 ###### 有参无返回值 /* public void test2(String name){ name = "xxxx"; } */ ListBuffer<JCTree.JCStatement> testStatement2 = new ListBuffer<>(); testStatement2.append(treeMaker.Exec(treeMaker.Assign(treeMaker.Ident(names.fromString("name")),treeMaker.Literal("xxxx")))); JCTree.JCBlock testBody2 = treeMaker.Block(0, testStatement2.toList()); // 生成入参 JCTree.JCVariableDecl param = treeMaker.VarDef(treeMaker.Modifiers(Flags.PARAMETER), names.fromString("name"),treeMaker.Ident(names.fromString("String")), null); com.sun.tools.javac.util.List<JCTree.JCVariableDecl> parameters = com.sun.tools.javac.util.List.of(param); JCTree.JCMethodDecl test2 = treeMaker.MethodDef( names.fromString("test2"), // 方法名 parameters, // 入参 testBody2, null ); `###### 有参有返回值```java /* 有参有返回值 public String test3(String name){ return name; } */ ListBuffer<JCTree.JCStatement> testStatement3 = new ListBuffer<>(); testStatement3.append(treeMaker.Return(treeMaker.Ident(names.fromString("name")))); JCTree.JCBlock testBody3 = treeMaker.Block(0, testStatement3.toList()); JCTree.JCVariableDecl param3 = treeMaker.VarDef(treeMaker.Modifiers(Flags.PARAMETER), names.fromString("name"),treeMaker.Ident(names.fromString("String")), null); com.sun.tools.javac.util.List<JCTree.JCVariableDecl> parameters3 = com.sun.tools.javac.util.List.of(param3); JCTree.JCMethodDecl test3 = treeMaker.MethodDef( names.fromString("test4"), // 方法名 treeMaker.Ident(names.fromString("String")), // 返回类型 parameters3, // 入参 testBody3, null ); ``` ##### 特殊的 我们学完了如何进行定义参数,如何进行定义方法,其实还有好多语句需要学习,例如如何生成new语句,如何生成方法调用的语句,如何生成if语句。j接下来我们就学习一些比较特殊的语法。 ###### new一个对象
// 创建一个new语句 CombatJCTreeMain combatJCTreeMain = new CombatJCTreeMain(); JCTree.JCNewClass combatJCTreeMain = treeMaker.NewClass(
1 2 3 null, ```python treeMaker.Ident(names.fromString("CombatJCTreeMain")),
null
);
1 2 3 JCTree .JCVariableDecl jcVariableDecl1 = treeMaker.VarDef ( treeMaker.Modifiers (Flags .PARAMETER ), names.fromString ("combatJCTreeMain" ),
combatJCTreeMain
);
`###### 方法调用(无参)```java
1 2 3 4 5 JCTree.JCExpressionStatement exec = treeMaker.Exec( treeMaker.Apply( treeMaker.Select( treeMaker.Ident(names.fromString("combatJCTreeMain" )), // . 左边的内容 names.fromString("test" ) // . 右边的内容
),
1 com.sun.tools.javac.util.List.nil()
)
);
`###### 方法调用(有参)```java
1 2 3 // 创建一个方法调用 combatJCTreeMain.test2("hello world!" ); JCTree.JCExpressionStatement exec2 = treeMaker.Exec( names.fromString("test2" ) // . 右边的内容
),
1 com.sun.tools.javac.util.List.of(treeMaker.Literal("hello world!")) // 方法中的内容
)
);
`###### if语句```json /* 创建一个if语句
1 2 3 4 if("BuXueWuShu".equals(name)){ add = "a" + "b"; }else{ add += "test";
}
*/
1 2 3 4 // "BuXueWuShu" .equals(name) JCTree.JCMethodInvocation apply = treeMaker.Apply( treeMaker.Literal ("BuXueWuShu" ), // . 左边的内容 names.fromString("equals" ) // . 右边的内容
),
1 com.sun.tools.javac.util.List .of(treeMaker.Ident(names.fromString("name" )))
);
1 2 3 4 // add = "a" + "b" JCTree.JCExpressionStatement exec3 = treeMaker.Exec(treeMaker.Assign(treeMaker.Ident(names.fromString("add" )), treeMaker.Binary(JCTree.Tag.PLUS, treeMaker.Literal ("a" ), treeMaker.Literal ("b" )))); // add += "test" JCTree.JCExpressionStatement exec1 = treeMaker.Exec(treeMaker.Assignop(JCTree.Tag.PLUS_ASG, treeMaker.Ident(names.fromString("add" )), treeMaker.Literal ("test" )));
1 JCTree.JCIf anIf = treeMaker.If(
apply, // if语句里面的判断语句
exec3, // 条件成立的语句
exec1 // 条件不成立的语句
);
#### 1.7 源码地址
#### 1.8 总结
纸上得来终觉浅,绝知此事要躬行。希望大家看完此篇文章能够自己在本机上自己试验一下。自己设置几个参数,自己学的Lombok学着生成一下get、set方法,虽然本篇知识在日常开发中基本上不会用到,但是万一用到了这些知识那么别人不会而你会,差距其实就慢慢的给拉开了。本篇涉及到的所有代码都在github上面有,拉下来以后全局搜 `CombatJCTreeProcessor` 类就可以看到了。
本文标题: Java中的屠龙之术如
发布时间: 2021年02月16日 00:00
最后更新: 2025年12月30日 08:54
原始链接: https://haoxiang.eu.org/2dc1cb3a/
版权声明: 本文著作权归作者所有,均采用CC BY-NC-SA 4.0 许可协议,转载请注明出处!