根据输入内的长度和位置获取令牌

时间:2015-05-15 11:43:24

标签: parsing bison flex-lexer jison

在我的输入中,我有没有任何分隔符分隔的字符流,如下所示:

input = "150001"

我想制作解析器(使用JISON),根据位置和长度进行标记,这应该是我的标记:

15 - system id (first 2 numbers)
0001 - order num (4 numbers after)

你能给我一些建议我怎样才能做到这一点, 我试图像这样添加我的令牌:

    %lex
    %%

     [0-9]{2}    return "SYSTEM_ID"
     [0-9]{4}    return "ORDER_NUM"

   \lex
   %%

但正如预期的那样,这不起作用:)

有没有办法解析这种输入,你用字符长度解析?

1 个答案:

答案 0 :(得分:1)

您可以使用状态声明创建一个简单的解析器,并为每个规则分配状态。参考JISON的documentation,它会变成这样的东西(注意你的词法分析器仍然不完整,因为它对标识符没有任何作用或者" ="):

%lex 
%s system_id order_num
%%
 /* some more logic is needed to accept identifier, then "=", each
    with its own state, and beginning "system_id" state.
  */
 <system_id>[0-9]{2}    this.begin("order_num"); return "SYSTEM_ID"
 <order_num>[0-9]{4}    this.begin('INITIAL'); return "ORDER_NUM"

\法    %%