python自动重试第三方包retrying
2018-06-18 02:33:27来源：未知 阅读 ()
最近写了一个爬虫，需要连接国外的一个网站，经常出现掉线的情况，自己写了一个自动重连的代码，但感觉不够简洁。。。
后来就上万能的github，找到了一个第三包，基本能满足我的要求。这个第三方包就是retrying.
我的需求就是每当出现request相关异常的时候，就自动重来，上限连接10次；使用代码如下：
1 from retrying import retry 2 3 def is_request_exception(e): 4 return issubclass(type(e),RequestException) 5 6 @retry(retry_on_exception=is_request_exception,wrap_exception=False, stop_max_attempt_number=10) 7 def request_get(url, timeout=120): 8 return requests.get(url, timeout=120)
刚开始用的时候，也遇到一些坑，就是在request_get用了try..except，导致不成功。后来删除就可以了。。。
我理解，在retring包中，已经有exception处理了，如果你的代码中有了exception处理，retring就没有捕获异常，就没法达到期望的结果了。
retrying还有非常多的自定义参数，如果等待时长控制，总共等待时间控制等等，暂时还没有这么特别的要求，等需要的时候，我再去研究一下。
标签：
版权申明：本站文章部分自网络，如有侵权，请联系：west999com@outlook.com
特别注意：本站所有转载文章言论不代表本站观点，本站所提供的摄影照片，插画，设计作品，如需使用，请与原作者联系，版权归原作者所有
- python3基础之“术语表（2）” 2019-08-13
- python3 之 字符串编码小结（Unicode、utf-8、gbk、gb2312等 2019-08-13
- Python3安装impala 2019-08-13
- 小白如何入门 Python 爬虫？ 2019-08-13
- python_字符串方法 2019-08-13
IDC资讯： 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营： 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程： Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术： Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧： 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作： FrontPages Dreamweaver Javascript css photoshop fireworks Flash
