Skip to main content
 首页 » 编程设计

python之Django shell 编码错误(仅限 Debian,Ubuntu 可以)

2024年08月30日31rubylouvre

美好的一天

有人可以解释一下 Django manage.py shell 控制台背后发生了什么吗? 问题如下。我正在开发一个 Django 应用程序,它使用 urllib 来解析一些 html 页面以从中获取一些信息。该信息是俄语,所以它应该是 unicode(在这种情况下是地址字符串)。接下来,我的脚本将它提供给其他一些失败的第三方模块,因为它不是有效的 unicode 字符串(我正在尝试从地址进行地理解码)。 我尝试使用 print address 命令打印字符串(在本例中为解析地址)以进行控制台,但它失败了:

File "<console>", line 1, in <module> 
... some useless stacktrace ...     
    print address 
UnicodeEncodeError: 'ascii' codec can't encode characters in position 0-1: ordinal not in range(128) 

有趣的部分来了。
我有 2 台计算机:带有 Ubuntu 和 Python 2.7.2 的工作站和带有 Python 2.7.2 的 Debian Lenny VPS。我在两台机器上以相同的方式启动解析器:通过执行 python manage.py shell 并从中调用我的函数。
首先我在两个安装上都遇到了同样的错误,但后来我注意到我的 python 编码设置为“ascii”(import sys; sys.getdefaultencoding())。当我把

import sys; reload(sys).setdefaultencoding('utf-8') 

进入 settings.py 问题解决了 Ubuntu。现在我得到正确的打印品,例如г. Челябинск, ул. Кирова, д. 27, КТК Набережный,但这不适用于 Debian。

如果我删除这个 print address 字符串,我会得到不可读的地理定位错误,但同样 - 仅在 Debian 上。 Ubuntu 运行良好:

Failed to geodecode address [г. ЧелÑбинÑк, Ñл. 1-ой ÐÑÑилеÑки, 17/1, ÑÑнок ÐÑÑак, 1-з] 

再多的 unicode(address).encode('utf-8') 魔法也无济于事。

所以我就是无法理解。给我带来这么多麻烦的机器之间有什么区别?

请您参考如下方法:

如果您运行以下 python 脚本,您将看到发生了什么:

# -*- coding: utf-8 -*- 
a = r"Челябинск" 
print "Encode from UTF-8 to UTF-8:",unicode(a,'utf-8').encode('utf-8') 
print "Encode from ISO8859-1 to UTF-8:",unicode(a,'iso8859-1').encode('utf-8') 

输出是:

Encode from ISO8859-1 to UTF-8: Челябинск

Encode from ISO8859-1 to UTF-8: ЧелÑбинÑк

本质上,您将(已经)编码为 UTF-8 的字符串重新编码(第二次,就好像它是 ISO8859-1)为 UTF-8。

在每种情况下都值得检查一下机器的默认编码。

如果有人可以添加到此答案,请添加。