Flex词法器输出修改

Flex lexer output modification

本文关键字：修改 输出 词法 Flex      更新时间：2023-10-16

如何在c++中使用flex lexer并修改令牌的yytext值?比如说，我有一个这样的规则:

"/*"    {
        char c;
        while(true)
            {
            c = yyinput();
            if(c == 'n')
                ++mylineno;
            if (c==EOF){
                yyerror( "EOF occured while processing comment" );
                break;
            }
            else if(c == '*')
                {
                if((c = yyinput()) == '/'){
                    return(tokens::COMMENT);}
                else
                    unput(c);
                }
            }
        }

我想得到令牌tokens::COMMENT，它的注释值介于/*和*/之间。(上述解决方案给出"/*"作为值。

另外，非常重要的是跟踪行号，所以我正在寻找支持它的解决方案。

编辑当然，我可以修改yytext和yyleng的值(如yytext+=1; yyleng-=1，但我仍然不能解决上述问题)

我仍然认为启动条件是正确的答案。

%x C_COMMENT
char *str = NULL;
void addToString(char *data)
{
    if(!str)
    { 
        str = strdup(data);
    }
    else
    {
        /* handle string concatenation */
    }
}
"/*"                       { BEGIN(C_COMMENT); }
<C_COMMENT>([^*nr]|(*+([^*/nr])))*    { addToString(yytext); }
<C_COMMENT>[nr]          { /* handle tracking, add to string if desired */ }
<C_COMMENT>"*/"            { BEGIN(INITIAL); }

我使用了以下引用:
http://ostermiller.org/findcomment.html
https://stackoverflow.com/a/2130124/1003855

您应该能够使用类似的正则表达式来处理字符串

相关文章：