美好的一天
有人可以解释一下 Django manage.py shell 控制台背后发生了什么吗? 问题如下。我正在开发一个 Django 应用程序,它使用 urllib 来解析一些 html 页面以从中获取一些信息。该信息是俄语,所以它应该是 unicode(在这种情况下是地址字符串)。接下来,我的脚本将它提供给其他一些失败的第三方模块,因为它不是有效的 unicode 字符串(我正在尝试从地址进行地理解码)。 我尝试使用 print address 命令打印字符串(在本例中为解析地址)以进行控制台,但它失败了:
File "<console>", line 1, in <module>
... some useless stacktrace ...
print address
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128)
有趣的部分来了。
我有 2 台计算机:带有 Ubuntu 和 Python 2.7.2 的工作站和带有 Python 2.7.2 的 Debian Lenny VPS。我在两台机器上以相同的方式启动解析器:通过执行 python manage.py shell 并从中调用我的函数。
首先我在两个安装上都遇到了同样的错误,但后来我注意到我的 python 编码设置为“ascii”(import sys; sys.getdefaultencoding())。当我把
import sys; reload(sys).setdefaultencoding('utf-8')
进入 settings.py 问题解决了 Ubuntu。现在我得到正确的打印品,例如г. Челябинск, ул. Кирова, д. 27, КТК Набережный,但这不适用于 Debian。
如果我删除这个 print address 字符串,我会得到不可读的地理定位错误,但同样 - 仅在 Debian 上。 Ubuntu 运行良好:
Failed to geodecode address [г. ЧелÑбинÑк, Ñл. 1-ой ÐÑÑилеÑки, 17/1, ÑÑнок ÐÑÑак, 1-з]
再多的 unicode(address).encode('utf-8') 魔法也无济于事。
所以我就是无法理解。给我带来这么多麻烦的机器之间有什么区别?
请您参考如下方法:
如果您运行以下 python 脚本,您将看到发生了什么:
# -*- coding: utf-8 -*-
a = r"Челябинск"
print "Encode from UTF-8 to UTF-8:",unicode(a,'utf-8').encode('utf-8')
print "Encode from ISO8859-1 to UTF-8:",unicode(a,'iso8859-1').encode('utf-8')
输出是:
Encode from ISO8859-1 to UTF-8: Челябинск
Encode from ISO8859-1 to UTF-8: ЧелÑбинÑк
本质上,您将(已经)编码为 UTF-8 的字符串重新编码(第二次,就好像它是 ISO8859-1)为 UTF-8。
在每种情况下都值得检查一下机器的默认编码。
如果有人可以添加到此答案,请添加。
