我有一个 Python 2.7 脚本,它包括从数据库中打开/抓取多个 URL 并从网页中提取一些信息。该代码最多可能需要 8 个小时才能运行,而且我要处理多个网站。
偶尔(1-2 小时),我在尝试打开 URL 时随机收到错误消息 IOError: [Errno socket error] [Errno 10060]
IOError: [Errno socket error] [Errno 10060] A connection attempt
failed because the connected party did not properly respond after a
period of time, or established connection failed because connected
host has failed to respond
我试图通过在 URL 打开操作之间使用 time.sleep(2) 添加 2 秒暂停来避免错误,但我仍然收到错误。该错误似乎与我尝试从中打开 URL 的网站无关。
我正在寻找一种使用 try/except 语句来防止我的脚本崩溃的方法。
如果出现套接字错误,脚本会暂停大约 20 秒,然后重试打开 URL。如果 URL 正确打开,继续执行脚本。我正在使用 urlopen() 打开 URL。
请您参考如下方法:
当您的代码引发 IOError 时,运行此代码,但将您的错误行替换为 raise。
try:
raise IOError
except IOError:
time.sleep(20)
pass
else:
break
