我在这里使用python2.7.1上的beautifulsoup3.2。在
我最近一直想找些简单的工作,但是 似乎相当棘手:
我做以下工作:
temp=BeautifulSoup(urllib2.urlopen(urlList[1], None,15))
但是,我得到了一个错误:
^{pr2}$如果我下次运行相同的循环,有时,我还会得到:
File "/home/foo/k/kat/BeautifulSoup.py", line 1519, in __init__
BeautifulStoneSoup.__init__(self, *args, **kwargs)
File "/home/foo/k/kat/BeautifulSoup.py", line 1144, in
__init__
self._feed(isHTML=isHTML)
File "/home/foo/k/kat/BeautifulSoup.py", line 1186, in _feed
SGMLParser.feed(self, markup)
File "/usr/lib/python2.7/sgmllib.py", line 104, in feed
self.goahead(0)
File "/usr/lib/python2.7/sgmllib.py", line 143, in goahead
k = self.parse_endtag(i)
File "/usr/lib/python2.7/sgmllib.py", line 320, in parse_endtag
self.finish_endtag(tag)
File "/usr/lib/python2.7/sgmllib.py", line 358, in finish_endtag
method = getattr(self, 'end_' + tag)
UnicodeEncodeError: 'ascii' codec can't encode characters in position
4-5: ordinal not in range(128)
如何避免这种错误?很明显这是有问题的sgmllib.py. 在
我尝试了一些SOF的解决方案:
*]尝试过soup = BeautifulSoup(page, fromEncoding=<encoding of the page>)
结果:正确无误。在
*]尝试升级我的sgmllib.py从2.7.2版本到我的2.7.1版本 结果:正确无误。在
*]尝试过html = BeautifulSoup(page.encode('utf-8'))
结果:正确无误。在
我会很感激任何关于如何解决这个编码错误的建议。在
在模块中尝试此代码
相关问题 更多 >
编程相关推荐