UnicodeDecodeError：'ascii'编解码器无法解码位置1的字节0xef

Question

UnicodeDecodeError：'ascii'编解码器无法解码位置1的字节0xef我在尝试将字符串编码为UTF-8时遇到了一些问题。我尝试过很多东西，包括使用string.encode('utf-8')和unicode(string)，但是我得到了错误：UnicodeDecodeError：'ascii'编解码器无法解码位置1的字节0xef：序数不在范围内（128）这是我的字符串：(｡･ω･｡)ﾉ我不知道出了什么问题，任何想法？编辑：问题是打印字符串不正确显示。此外，当我尝试转换它时出现此错误：Python 2.7.1+ (r271:86832, Apr 11 2011, 18:13:53)[GCC 4.5.2] on linux2Type "help", "copyright", "credits" or "license" for more information.>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'>>> s1 = s.decode('utf-8')>>> print s1Traceback (most recent call last):   File "<stdin>", line 1, in <module>UnicodeEncodeError: 'ascii' codec can't encode characters in position 1-5: ordinal not in range(128)

Answer 1

这与您的终端编码未设置为UTF-8有关。这是我的终端

$ echo $LANG
en_GB.UTF-8$ pythonPython 2.7.3 (default, Apr 20 2012, 22:39:59) [GCC 4.6.3] on linux2Type "help", "copyright", "credits" or "license" for more information.>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'>>> s1 = s.decode('utf-8')>>> print s1(｡･ω･｡)ﾉ>>>

在我的终端上，该示例适用于上述，但如果我摆脱了LANG设置，那么它将无法工作

$ unset LANG
$ pythonPython 2.7.3 (default, Apr 20 2012, 22:39:59) [GCC 4.6.3] on linux2Type "help", "copyright", "credits" or "license" for more information.>>> s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89'>>> s1 = s.decode('utf-8')>>> print s1Traceback (most recent call last):
  File "<stdin>", line 1, in <module>UnicodeEncodeError: 'ascii' codec can't encode characters in position 1-5: ordinal not in range(128)
>>>

查阅linux变体的文档，了解如何使此变更永久化。

Answer 2

Nick Craig-Wood的演示中发表评论。您已正确解码字符串。问题在于print命令，因为它将Unicode字符串转换为控制台编码，并且控制台无法显示字符串。尝试将字符串写入文件，并使用支持Unicode的一些不错的编辑器查看结果：

import codecs

s = '(\xef\xbd\xa1\xef\xbd\xa5\xcf\x89\xef\xbd\xa5\xef\xbd\xa1)\xef\xbe\x89's1 = s.decode('utf-8')f = codecs.open('out.txt', 'w', encoding='utf-8')f.write(s1)f.close()

然后你会看到(｡･ω･｡)ﾉ。