Question

我正在使用机械化库来模拟浏览器以获取如下的html，但是我一次又一次地收到错误......

代码错误输出：

post_url = "http://www.stackoverflow.com/"
browser = mechanize.Browser()
browser.set_handle_robots(False)
browser.addheaders = [('User-agent', 'Firefox')]

html = browser.open(post_url).read().decode('UTF-8')

错误：

Traceback (most recent call last):
  File "C:\test.py", line 1538, in <module>
    periodically(180, -60, +60, getData)
  File "C:\test.py", line 262, in periodically
    s.run()
  File "C:\Python27\lib\sched.py", line 117, in run
    action(*argument)
  File "C:\test.py", line 1241, in getData
    html = browser.open(post_url).read().decode('UTF-8')
  File "build\bdist.win32\egg\mechanize\_mechanize.py", line 203, in open
    return self._mech_open(url, data, timeout=timeout)
  File "build\bdist.win32\egg\mechanize\_mechanize.py", line 255, in _mech_open
    raise response
httperror_seek_wrapper: HTTP Error 500: Internal Server Error
>>>

任何人都知道如何修复/解决此错误？

Answer 1

HTTP错误500表示“内部服务器错误”。

我猜您没有提供与您提供的示例代码完全相同的错误，对吗？

两个可能的原因：

服务器出错，例如过载/损坏的数据库/等。（不可能）
您正在发布“奇怪数据”，服务器（应用程序）无法正确处理（可能）。理论上，服务器（应用程序）应验证发布的数据并发送400“错误请求”。

我认为它与机械化lib无关。

修改如果您不关心该错误的原因并且只想捕获可以使用的异常：

try: html = browser.open(post_url).read().decode('UTF-8') except mechanize.HTTPError, e: # handle http errors explicit by code if int(e.code) == 500: # do nothing. Maybe you need to set "html" to empy string. pass else: raise e # if http error code is not 500, reraise the exception

Answer 2

您无法修复它，只需仔细检查您正在解析的数据是否正确。

要解决此问题，请使用try/except：

from urllib2 import HTTPError

try:
    post_url = "http://www.stackoverflow.com/"
    browser = mechanize.Browser()
    browser.set_handle_robots(False)
    browser.addheaders = [('User-agent', 'Firefox')]
    html = browser.open(post_url).read().decode('UTF-8')

except HTTPError, e:
    print "Got error code", e.code

机械化一次又一次地随机出错？

2 个答案: