使yylex返回symbol_type而不是int

时间:2016-01-02 21:16:28

标签: c++ bison flex-lexer

我试图从yylex返回符号对象,如本文档中所示http://www.gnu.org/software/bison/manual/html_node/Complete-Symbols.html

然而,当我编译时,我发现return yy::parser::make_PLUS();被放入int yyFlexLexer::yylex(),所以我收到此错误消息(以及许多类似的其他规则):

lexer.ll:22:10: error: no viable conversion from 'parser::symbol_type' (aka 'basic_symbol<yy::parser::by_type>') to 'int'
{ return yy::parser::make_PLUS(); }

解决此问题的正确方法是什么?

lexer.ll

%{
#include "ASTNode.hpp"

// why isn't this in parser.tab.hh?
# ifndef YY_NULLPTR
#  if defined __cplusplus && 201103L <= __cplusplus
#   define YY_NULLPTR nullptr
#  else
#   define YY_NULLPTR 0
#  endif
# endif

#include "parser.tab.hh"

#define yyterminate() return yy::parser::make_END()
%}

%option nodefault c++ noyywrap

%%
"+"            { return yy::parser::make_PLUS(); }
"-"            { return yy::parser::make_MINUS(); }
... more rules ...
%%

parser.yy

%{
#include "AstNode.hpp"
#include ...

static int yylex(yy::parser::semantic_type *arg);
%}

%skeleton "lalr1.cc"

%define api.token.constructor
%define api.value.type variant
%define parse.assert

%token          END 0
%token          PLUS
%token          MINUS
%token ... many tokens ...
%type   <ASTNode *> S statement_list ...

%%

S:      statement_list
        { $$ = g_ast = (StatementList *)$1; }
    ;

... more rules ...

%%

static int yylex(yy::parser::semantic_type *arg) {
    (void)arg;
    static FlexLexer *flexLexer = new yyFlexLexer();
    return flexLexer->yylex();
}

void yy::parser::error(const std::string &msg) {
    std::cout << msg << std::endl;
    exit(1);
}

1 个答案:

答案 0 :(得分:3)

您必须在生成的扫描程序和生成的解析器中使用正确的签名声明yylex。显然,返回int不是你想要的。

在bison发行版中包含的calc ++示例中(并在bison manual中进行了描述),您可以看到如何执行此操作:

  

然后是扫描功能的声明。 Flex期望yylex的签名在宏YY_DECL中定义,并且C ++解析器期望它被声明。我们可以将两者考虑在内。

// Tell Flex the lexer's prototype ...
# define YY_DECL \
  yy::calcxx_parser::symbol_type yylex (calcxx_driver& driver)
// ... and declare it for the parser's sake.
YY_DECL;

这只是改变yylex声明的正常方式。虽然野牛手册没有提到这一点,并且.ll后缀可以说具有误导性,但它使用C ++ flex骨架。它使用C骨架生成一个可以用C ++编译的文件。据我所知,它甚至不会产生一个可重入的词法分析器。

calc++.yy file中还有一个重要选项:

  

驱动程序通过引用传递给解析器和扫描程序。这提供了一个简单但有效的纯接口,而不依赖于全局变量。

// The parsing context.
%param { calcxx_driver& driver }

这表明calcxx_driver& driver是解析器和扫描器的参数。也就是说,您将它提供给解析器,解析器会自动将其传递给扫描程序。这与yylex生成的YY_DECL原型相匹配。

您可能实际上不需要扫描仪操作中的该对象。我不认为它的使用是强制性的,但我几乎没有在bison或flex中使用C ++ API,所以我可能错了。