c++ - 没有空格的 Lex 解析

Question

我正在使用 Lex、Yacc 和 C++ 编写自定义 shell。它在 Unix 环境中运行。只要 token 之间有空格，它目前就可以正常工作。例如:

ls | grep test > out

将通过:

WORD PIPE WORD WORD GREAT WORD

到 Yacc，然后从那里采取行动。但是，我也需要它在没有空格的情况下工作。例如:

ls|grep test>out

应该和前面的命令一样工作。但是，它目前仅通过:

WORD WORD

有没有办法在 Lex 标记输入之前解析输入？

编辑:

这是我的 Lex 文件:

%{

#include <string.h>
#include "y.tab.h"

%}

%%

\n  {
    return NEWLINE;
}

[ \t]   {
    /* Discard spaces and tabs */
    }   

">" { return GREAT; }

">&" { return GREATAMPERSAND; }

">>" { return GREATGREAT; }

">>&" { return GREATGREATAMPERSAND; }

"<" { return LESS; }

"|" { return PIPE; }

"&" { return AMPERSAND; }

[^ \t\n][^ \t\n]*  {
    /* Assume that file names have only alpha chars */
    yylval.string_val = strdup(yytext);
    return WORD;
}

.   {
    /* Invalid character in input */
    return NOTOKEN;
}

%%

Answer 1

您需要更改您对WORD 的定义。现在，当它遇到一个字母字符时，它会将下一个空格之前的所有内容都视为该 WORD 的一部分。

您想更改它，使其不包含您用于其他目的的任何标点符号:

[^ \t\n\>\<\|\&]+  {
    /* Assume that file names have only alpha chars */
    yylval.string_val = strdup(yytext);
    return WORD;
}