python - 将 BNF 语法转换为 pyparsing

Question

我如何使用正则表达式(或 pyparsing 更好？)描述下面呈现的脚本语言的语法(Backus–Naur 形式):

<root>   :=     <tree> | <leaves>
<tree>   :=     <group> [* <group>] 
<group>  :=     "{" <leaves> "}" | <leaf>;
<leaves> :=     {<leaf>;} leaf
<leaf>   :=     <name> = <expression>{;}

<name>          := <string_without_spaces_and_tabs>
<expression>    := <string_without_spaces_and_tabs>

脚本示例:

{
 stage = 3;
 some.param1 = [10, 20];
} *
{
 stage = 4;
 param3 = [100,150,200,250,300]
} *
 endparam = [0, 1]

我使用 python re.compile 并希望将所有内容分组，如下所示:

[ [ 'stage',       '3'],
  [ 'some.param1', '[10, 20]'] ],

[ ['stage',  '4'],
  ['param3', '[100,150,200,250,300]'] ],

[ ['endparam', '[0, 1]'] ]

更新:我发现 pyparsing 是比正则表达式更好的解决方案。

Answer 1

Pyparsing 让您可以简化其中一些类型的构造

leaves :: {leaf} leaf

只是

OneOrMore(leaf)

所以你的 BNF 在 pyparsing 中的一种形式看起来像这样:

from pyparsing import *

LBRACE,RBRACE,EQ,SEMI = map(Suppress, "{}=;")
name = Word(printables, excludeChars="{}=;")
expr = Word(printables, excludeChars="{}=;") | quotedString

leaf = Group(name + EQ + expr + SEMI)
group = Group(LBRACE + ZeroOrMore(leaf) + RBRACE) | leaf
tree = OneOrMore(group)

我添加了 quotedString 作为替代 expr，以防你想要一些确实包含排除的字符之一的东西。并且在叶和组周围添加组将保持支撑结构。

不幸的是，您的样本不太符合此 BNF:

1. [10, 20] 和 [0, 1] 中的空格使它们成为无效表达式

2. 有些叶子没有终止;

3. 单独的 * 个字符 - ???

此示例使用上述解析器成功解析:

sample = """
{
 stage = 3;
 some.param1 = [10,20];
}
{
 stage = 4;
 param3 = [100,150,200,250,300];
}
 endparam = [0,1];
 """

parsed = tree.parseString(sample)    
parsed.pprint()

给予:

[[['stage', '3'], ['some.param1', '[10,20]']],
 [['stage', '4'], ['param3', '[100,150,200,250,300]']],
 ['endparam', '[0,1]']]