ANTLR4-带有不可区分标记的语言

Question

我正在为一种古老的语言发展语法。

@assign[@var1 (1+3)*2]
@assign[@var2 "foo" $ "bar"]    

@assign[@var2 "foo" $ "bar"]

@assign[var2 "foo" $ "bar"]

@assign
[@var2 "foo" 
$ "bar"]

@assign
[var2 "foo" 
$ "bar"]

@var1 @var2

@assign[@var1 (1+3)*2]
@assign[@var2 "foo" $ "bar"]
@var1 @var2

IS：

8 foobar

以下是我从Mu语法文件开始编写的语法：

grammar Grammar;

////////////////
//   PARSER   //
////////////////

file
 : block EOF
 ;

block
 : stat*
 ;

stat
 : assignment
 | print
 ;

assignment
 : ASSIGN LBRACKET variable expr RBRACKET
 ;

print
 : AT ID
 ;

expr
 : expr CONCAT expr #concatExpr
 | expr MUL expr    #mulExpr
 | expr DIV expr    #divExpr
 | expr ADD expr    #addExpr
 | expr SUB expr    #subExpr
 | atom             #atomExpr
 ;

variable
 : AT ID
 | ID
 ;

atom
 : LPARENS expr RPARENS  #parExpr
 | INT                   #intAtom
 | STRING                #stringAtom
 | variable              #variableAtom
 ;

///////////////
//   LEXER   //
///////////////

ASSIGN : AT 'assign' ;

AT : '@' ;

ID : [a-zA-Z_] [a-zA-Z_0-9]* ;

INT
 : [0-9]+
 ;

LBRACKET : '[' ;
RBRACKET : ']' ;
LPARENS : '(' ;
RPARENS : ')' ;

CONCAT : '$' ;
ADD : '+' ;
SUB : '-' ;
MUL : '*' ;
DIV : '/' ;

WS : [ \t\r\n] -> skip ;

COMMENT : '[*' .*? '*]' -> skip ;

STRING : '"' (~["\r\n] | '""')* '"' ;

为了打印变量，我开发了一个定制的访问者。访问visitPrint方法，我知道有两个令牌：AT和id。

@assign[@var1 "one"]
@assign[var2 "two"]
@assign[var3 var1 $ var2] 
Value of var3 is: @var3

Value of var3 is: onetwo

print
 : AT ID
 | ?????? //Help!
 ;

print
 : AT ID
 | .+?
 ;

提前谢了。

Answer 1

这看起来类似于Parr的“确定的ANTLR4参考”第12.3章中将XML标记与文本分离的示例。他使用lexer中的模式在XML标记内部和外部（即纯文本）之间切换令牌输出。

在您的例子中，似乎“@assign”和“]”充当标记（模式1)，否则您可以在识别变量后将输入打印到输出。