使用BeautifulSoup 3.1.0.1和Python 2.5.2的UnicodeEncodeError

时间:2009-01-20 21:33:25

标签: python encoding screen-scraping beautifulsoup

使用BeautifulSoup 3.1.0.1和Python 2.5.2,并尝试用法语解析网页。但是,一旦我调用findAll,我就会收到以下错误:

UnicodeEncodeError:'ascii'编解码器无法对位置1146中的字符u'\ xe9'进行编码:序数不在范围内(128)

以下是我目前正在运行的代码:

import urllib2
from BeautifulSoup import BeautifulSoup
page = urllib2.urlopen("http://fr.encarta.msn.com/encyclopedia_761561798/Paris.html")
soup = BeautifulSoup(page, fromEncoding="latin1")
r = soup.findAll("table")
print r

有人知道为什么吗?

谢谢!

更新:根据要求,以下是完整的跟踪

Traceback (most recent call last):
  File "[...]\test.py", line 6, in <module>
    print r
UnicodeEncodeError: 'ascii' codec can't encode characters in position 1146-1147: ordinal not in range(128)

1 个答案:

答案 0 :(得分:11)

这是另一个想法。您的终端无法显示Python的unicode字符串。解释器首先尝试将其转换为ASCII。您应该在打印之前明确编码它。我不知道soup.findAll()的确切语义。但它可能是这样的:

for t in  soup.findAll("table"):
    print t.encode('latin1')

如果t确实是一个字符串。也许它只是你需要构建要显示的数据的另一个对象。