xText 中的终端/数据类型/解析器规则

Question

我正在使用xtext 2.4。我想做的是类似SQL的语法。让我感到困惑的是，我不确定哪些事情应该被视为终端/数据类型/解析器规则。到目前为止，我与MyTerm相关的语法是：

Model:
    (terms += MyTerm ';')*
;
MyTerm:
    constant=MyConstant | variable?='?'| collection_literal=CollectionLiteral 
;
MyConstant
    : string=STRING 
    | number=MyNumber
    | date=MYDATE 
    | uuid=UUID 
    | boolean=MYBOOLEAN
    | hex=BLOB
;
MyNumber:
    int=SIGNINT | float=SIGNFLOAT
;

SIGNINT returns ecore::EInt:
    '-'? INT
;

SIGNFLOAT returns ecore::EFloat:
    '-'? INT '.' INT;
;
CollectionLiteral:
    => MapLiteral | SetLiteral | ListLiteral
;
MapLiteral:
    '{' {MapLiteral} (entries+=MapEntry (',' entries+=MapEntry)* )? '}'
;
MapEntry:
    key=MyTerm ':' value=MyTerm
;
SetLiteral:
    '{' {SetLiteral} (values+=MyTerm (',' values+=MyTerm)* )+ '}'
;
ListLiteral:
    '[' {ListLiteral} ( values+=MyTerm (',' values+=MyTerm)* )? ']'
;
terminal MYDATE:
  '0'..'9' '0'..'9' '0'..'9' '0'..'9' '-'
  '0'..'9' '0'..'9' '-'
  '0'..'9' '0'..'9'
;
terminal HEX:
    'a'..'h'|'A'..'H'|'0'..'9'
;   
terminal UUID:
    HEX HEX HEX HEX HEX HEX HEX HEX '-'
    HEX HEX HEX HEX '-'
    HEX HEX HEX HEX '-'
    HEX HEX HEX HEX '-'
    HEX HEX HEX HEX HEX HEX HEX HEX HEX HEX HEX HEX
;
terminal BLOB:
    '0' ('x'|'X') HEX+
;
terminal MYBOOLEAN returns ecore::EBoolean:
    'true' | 'false' | 'TRUE' | 'FALSE'
;

几个问题：

• 如何定义带符号的整数？如果我定义另一个终端规则terminal SIGNINT: '-'? '0'..'9'+;，antlr 会抱怨 INT 变得无法访问。因此，我将其定义为数据类型规则SIGNINT: '-'? INT;这是正确的方法吗？

• 如何定义带符号的浮点数？我做了与定义带有符号的整数完全相同的操作，SIGNFLOAT: '-'? INT '.' INT;，不确定这是否也正确。

• 如何定义日期规则？我想使用解析器规则在字段中存储年/月/日信息，但将其定义为MyDate: year=INT '-' month=INT '-' date=INT; antlr 会抱怨Decision can match input such as "RULE_INT '-' RULE_INT '-' RULE_INT" using multiple alternatives: 2, 3 As a result, alternative(s) 3 were disabled for that input

• 我还有一些其他规则，例如

以下

RelationCompare:
    name=ID compare=COMPARE term=MyTerm
;

但a=4不会是一个有效的RelationCompare因为a和4将被视为HEX。我发现这是因为如果我将关系更改为j=44那么它就可以工作。在这篇文章中，它说终端规则定义的 eariler 将阴影后面定义的那些。但是，如果我在我的语法中重新定义terminal ID，无论是放在terminal HEX的前面还是之后，antlr 都会解释The following token definitions can never be matched because prior tokens match the same input: RULE_HEX,RULE_MYBOOLEAN。此问题也发生在k=0x00b。 k=0xaab有效，但k=0x00b无效。

有什么建议吗？

Answer 1

你如何定义一个带符号的整数？

• 将其视为两个单独的标记'-'和INT，并使用解析器规则而不是词法分析器规则。

你如何定义带符号的浮点数？

• 将其视为两个单独的标记'-'和FLOAT，并使用解析器规则而不是词法分析器规则。

如何定义日期规则？

• 将其视为五个单独的标记，并使用分析器规则而不是词法分析器规则。

我不知道最后一个问题的答案，因为这是在Xtext中，而不仅仅是ANTLR。

Answer 2

后来我找到了我想做的原始antlr语法，因此我只是将antlr语法翻译成xtext语法。以下是我定义这些基本类型的方式：

terminal fragment A: 'a'|'A';  
   ... 
terminal fragment Z: 'z'|'Z';
terminal fragment DIGIT: '0'..'9';
terminal fragment LETTER: ('a'..'z'|'A'..'Z');
terminal fragment HEX: ('a'..'f'|'A'..'F'|'0'..'9'); 
terminal fragment EXPONENT: E ('+'|'-')? DIGIT+;
terminal INTEGER returns ecore::EInt: '-'? DIGIT+;
terminal FLOAT returns ecore::EFloat: INTEGER EXPONENT | INTEGER '.' DIGIT* EXPONENT?;
terminal BOOLEAN: T R U E | F A L S E;

原始语法中的日期规则被视为字符串。

关于规则名称(规则：Antlr 语法 => xtext 语法(

• 解析器规则：以小写 => 开头的大写规则(每个规则都是一个 Java 类(
• 终端规则：以大写 => 开头，使用带terminal前缀的所有大写
字母
• 片段终端规则：fragment ID => terminal fragment ID

在 antlr 中，参数列表定义如下：

functionArgs
  : '(' ')'
  | '(' t1=term ( ',' tn=term )* ')'
;

对应的 xtext 语法为：

FunctionArgs
 : '(' ')'
 | '(' ts+=Term  (',' ts+=Term )* ')'
;

对于那些带有[ ]括起来的参数的解析器规则

properties[PropertyDefinitions props]
  : property[props] (K_AND property[props])*
;

大多数情况下，它们可以移动到左侧

Properties
  : props+=Property (K_AND props+=Property)*
;

现在它按预期工作。