ANTLR：获取子lexer规则的文本表示形式

Question

考虑ANTLR4中的以下lexer规则：

ID: [a-z]+;
INT: [0-9]+;
ARRAY: ID '[' INT ']';

在可以访问ctx.array()（其中ctx是由解析器规则生成的ParserRuleContext的子类）的树行走场景中，是否可以获得lexer规则id和int的文本表示？我当前使用ctx.array().getText()获取整个文本表示，并使用regexes解析id和int的内容，我只是想知道是否有一个“cleaner”开箱即用的解决方案。

注意：由于外部依赖关系，不能将array作为解析器规则。

提前感谢有意义的回答。

Answer 1

ANTLR 4中的Lexer规则不能分解为多个部分。这是我们做出的一个设计决定，它是ANTLR4 Lexer相对于ANTLR3 Lexer在速度和内存方面的巨大改进的一部分。ANTLR3 lexer是递归下降识别器，具有许多与解析器相同的特性。在ANTLR4中，lexer只不过是一个支持语义谓词的DFA识别器，因此根本不跟踪令牌的各个组件之间的边界。

您必须使array成为解析器规则，或者在需要分解令牌文本时单独解析getText()的结果。