python - 如何检查 Python 脚本已经生成的字符串的 linux shell 编码

Question

我运行一个 Python 脚本，它生成一个字符串，然后使用该字符串执行一个 shell 脚本。我想使用 linux shell 检查该字符串的编码，但不将该字符串写入文件(磁盘操作运行缓慢)。是否可以仅使用 RAM 检查 Linux (Ubuntu) 中的字符串编码？像这样的东西:

check-encoding 'My string with random encoding'

Python 检查编码脚本也很慢。

Answer 1

尝试文件实用程序。您可以通过使用 echo 将任何字符串作为 file argument 传递给 file 通过 - 选项管道传输到实用程序(许多命令在文件名作为参数的位置，以指示输入何时应来自标准输入而不是文件):

:~  $ echo "test" | file -i -
/dev/stdin: text/plain; charset=us-ascii

:~  $ echo "тест" | file -i -
/dev/stdin: text/plain; charset=utf-8

通过管道连接到 sed:

:~  $ echo "тест" | file -i - | sed 's/.*charset=\(.*\)/\1/'
utf-8

或 awk(你当然可以混合使用):

:~  $ echo "тест" | file -i - | awk '{ print $3 }'
charset=utf-8

---

你也可以使用 python chardet模块。 Chardet 带有一个命令行脚本，可以报告一个或多个文件的编码。只需安装它:

pip install chardet

并与来自 echo 的管道一起使用:

:~  $ echo "тест" | chardetect
<stdin>: utf-8 with confidence 0.938125