Python进阶:并发编程之Asyncio
2019-07-24 09:18:25来源:博客园 阅读 ()
什么是Asyncio
Sync(同步) VS Async(异步)
Asyncio 工作原理
Asyncio 用法
import asyncio import aiohttp import time async def download_one(url): async with aiohttp.ClientSession() as session: async with session.get(url) as resp: print('Read {} from {}'.format(resp.content_length, url)) #text_len = await resp.text() #print('Read {} from {}'.format(len(text_len), url)) #print('len(text_len)',len(text_len)) async def download_all(sites): tasks = [asyncio.create_task(download_one(site)) for site in sites] await asyncio.gather(*tasks) def main(): sites = [ 'https://www.baidu.com/', 'https://pypi.org/', 'https://www.sina.com.cn/', 'https://www.163.com/', 'https://news.qq.com/', 'http://www.ifeng.com/', 'http://www.ce.cn/', 'https://news.baidu.com/', 'http://www.people.com.cn/', 'http://www.ce.cn/', 'https://news.163.com/', 'http://news.sohu.com/' ] start_time = time.perf_counter() asyncio.run(download_all(sites)) end_time = time.perf_counter() print('Download {} sites in {} seconds'.format(len(sites), end_time - start_time)) if __name__ == '__main__': main() # 输出 Read 227 from https://www.baidu.com/ Read None from http://www.ce.cn/ Read None from http://www.ce.cn/ Read 38914 from http://www.people.com.cn/ Read None from https://news.qq.com/ Read None from https://news.163.com/ Read None from https://www.163.com/ Read 129268 from https://www.sina.com.cn/ Read None from http://www.ifeng.com/ Read None from https://news.baidu.com/ Read None from http://news.sohu.com/ Read 4293 from https://pypi.org/ Download 12 sites in 0.7875643999999999 seconds
loop = asyncio.get_event_loop() try: loop.run_until_complete(coro) finally: loop.close()
Asyncio 有缺陷吗?
Asyncio 还是 多线程?
可以遵循以下伪代码的规范:
if io_bound: if io_slow: print('Use Asyncio') else: print('Use multi-threading') else if cpu_bound: print('Use multi-processing')
- 如果是 I/O bound,并且 I/O 操作很慢,需要很多任务 / 线程协同实现,那么使用 Asyncio 更合适。
- 如果是 I/O bound,但是 I/O 操作很快,只需要有限数量的任务 / 线程,那么使用多线程就可以了。
- 如果是 CPU bound,则需要使用多进程来提高程序运行效率。
参考
极客时间《Python核心技术与实战》专栏
原文链接:https://www.cnblogs.com/xiaoguanqiu/p/11166504.html
如有疑问请与原作者联系
标签:
版权申明:本站文章部分自网络,如有侵权,请联系:west999com@outlook.com
特别注意:本站所有转载文章言论不代表本站观点,本站所提供的摄影照片,插画,设计作品,如需使用,请与原作者联系,版权归原作者所有
- python3基础之“术语表(2)” 2019-08-13
- python3 之 字符串编码小结(Unicode、utf-8、gbk、gb2312等 2019-08-13
- Python3安装impala 2019-08-13
- 小白如何入门 Python 爬虫? 2019-08-13
- python_字符串方法 2019-08-13
IDC资讯: 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营: 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程: Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术: Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧: 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作: FrontPages Dreamweaver Javascript css photoshop fireworks Flash