理解ANTLR4中的lexer规则解析

Question

grammar KeywordTest;
enumDef : 'enum' '{' ... '}';
...
FOR: 'for'
...
ID:[a-zA-Z]; // does not match 'enum' or 'for'

ENUM_KEYWORD: 'enum'

ATNLR4可能在内部使用的代码将在规则enumdef：“enum”“{”...“}之后被取消，如下所示：

enumDef: ENUM_KEYWORD '{' ... '}
ENUM_KEYWORD: 'enum'

ANTLR4就是这样做事的吗？

Answer 1

lexer规则的顺序在语法中非常重要，因为将使用找到的第一个适用规则。你可以在这里读到更多。

因此，如果您有lexer规则：

ID: [a-zA-Z]+;
FOR: 'for';

根据其顺序输入，“FOR”将被标记为FOR token或ID token，因为对于这两者，它都是正确的。

alfaNum: (ALFA | NUM | ambigous | '_' )+?;
ambigous: SELECT | WHERE | FROM | WITH | SET | AS;