python - 在Python中处理unicode转换

Question

对于我的项目，所有内容都必须采用 unicode。这是我处理所有事情的方式，所有字符串都传递到这个函数中:

def unicodify(string):
    if not isinstance(string, unicode):
        return string.decode('utf8', errors='ignore')
    return string

以下方法对于生产代码来说是良好的做法吗？如果不是，您为什么以及如何建议解码为 un​​icode？ error='ignore' 实际上不适用于 ValueErrors 'invalid\x escape'，但我不知道如何正确处理它。

谢谢

Answer 1

您的字符串文字可能无效。

\x 后面应跟两个十六进制值(数字、 A 、 B 、 C 、 D 、 E 、 F 、 a 、 b 、 c 、 d 、 e 、 f )。

有效示例:

>>> '\xA9'
'\xa9'
>>> '\x00'
'\x00'
>>> '\xfF'
'\xff'

无效示例:

>>> '\xOO'
ValueError: invalid \x escape
>>> '\xl3'
ValueError: invalid \x escape
>>> '\x5'
ValueError: invalid \x escape

参见 String literals 。