python - 从字符串中提取带括号的 Python 表达式

Question

我一直想知道编写一些 Python 代码来搜索字符串以查找 ${ 形式的子字符串的索引会有多难。 表达式 } ，例如，其中 expr 是一个 Python 表达式或类似的东西。鉴于这样的事情，人们可以很容易地想象继续使用 compile() 检查表达式的语法。 ，使用 eval() 针对特定范围对其进行评估，甚至可能将结果代入原始字符串。人们必须一直做非常相似的事情。

我可以想象使用第三方解析器生成器 [oof] 或通过手动编码某种状态机 [eek] 或说服 Python 自己的解析器以某种方式完成繁重的工作 [hmm] 来解决这样的问题].也许某处有一个第三方模板库可以用来做这件事。也许限制 expr 的语法在简单性或执行时间或减少外部依赖性方面可能是一个有值(value)的妥协——例如，也许我真正需要的是匹配任何 expr 具有平衡花括号。

你的意思是什么？

更新:

非常感谢您到目前为止的回复!回顾我昨天写的东西，我不确定我是否足够清楚我在问什么。模板替换确实是一个有趣的问题，并且可能比我想知道的表达式提取子问题对更多人有用得多，但我提出它只是作为一个简单的例子，说明我的问题的答案在实际中可能会有用生活。其他一些潜在的应用程序可能包括将提取的表达式传递给语法高亮显示；将结果传递给真正的 Python 解析器并查看或修改解析树；或者使用提取的表达式序列来构建更大的 Python 程序，也许结合从周围文本中获取的一些信息。

${ 表达式 }我提到的语法也是一个例子，事实上我想知道我是否不应该使用 $( 表达式 )作为我的例子，因为它使明显方法的潜在缺点，沿着 re.finditer(r'$\{([^}]+)\}', s) 的路线，比较容易看。 Python 表达式可以(而且经常)包含 ) (或 } )字符。处理这些案例中的任何一个似乎都可能比它值得的麻烦多得多，但我还不相信这一点。请随时尝试制作此案例!

在发布这个问题之前，我花了相当多的时间研究 Python 模板引擎，希望有人可以揭示我所询问的那种低级功能——即可以在各种形式中找到表达式的东西上下文并告诉我它们在哪里，而不是局限于查找使用单一硬编码语法嵌入的表达式，始终对它们进行评估，并始终将结果替换回原始字符串。我还没有想出如何使用它们中的任何一个来解决我的问题，但我非常感谢有关更多内容的建议(不敢相信我错过了 wiki 上的精彩列表!)。这些东西的 API 文档往往是相当高级的，我对它们中的任何一个的内部结构都不太熟悉，所以我确信我可以使用帮助来查看这些内容并弄清楚如何让它们做诸如此类。

感谢您的耐心等待!

Answer 1

我认为您要问的是能够将 Python 代码插入要评估的文本文件中。已经有几个模块可以提供这种功能。您可以查看 Python.org Templating wiki page获取完整列表。

一些谷歌搜索还发现了一些您可能感兴趣的其他模块:

• texttemplate (py-templates 项目的一部分)
• template module

如果您出于某种原因真的只是想自己编写这个，您还可以深入研究这个 Python 食谱解决方案 Yet Another Python Templating Utility (YAPTU) :

"Templating" (copying an input file to output, on the fly inserting Python expressions and statements) is a frequent need, and YAPTU is a small but complete Python module for that; expressions and statements are identified by arbitrary user-chosen regular-expressions.

编辑:为了解决这个问题，我为此编写了一个非常简单的代码示例。我确定它有错误，但它至少说明了该概念的简化版本:

#!/usr/bin/env python

import sys
import re

FILE = sys.argv[1]

handle = open(FILE)
fcontent = handle.read()
handle.close()

for myexpr in re.finditer(r'\${([^}]+)}', fcontent, re.M|re.S):
    text = myexpr.group(1)
    try:
        exec text
    except SyntaxError:
        print "ERROR: unable to compile expression '%s'" % (text)

针对以下文本进行测试:

This is some random text, with embedded python like 
${print "foo"} and some bogus python like

${any:thing}.

And a multiline statement, just for kicks: 

${
def multiline_stmt(foo):
  print foo

multiline_stmt("ahem")
}

More text here.

输出:

[user@host]$ ./exec_embedded_python.py test.txt
foo
ERROR: unable to compile expression 'any:thing'
ahem