python_day_12 今日主要内容 1, 函数名的应用,第一类对象 函数名可以像变量一样进行使用 1.赋值 2.作为list元素 3.作为参数 4.作为返回值 2, 闭包 内部函数访问外部函数的局部变量. 好处: 1.安全 2.常驻内存. 提高效率 3, 迭代器 可迭代对象(Iterable):内部包含__iter_...

2018-07-18 01:15:50

excel表格： 词频统计： 爬取到的价格是string类型的，且有些价格并不明确的，所以这里需要对价格进行处理并排序，用到的list的sort(key=take_price)方法，其中key=take_price指定的方法，使用指定的方法去进行比较排序。 生成表格 这里采用的xlsxwriter库，便于图片的...

2018-07-18 01:15:46

爬图片比爬文字数据要好玩得多了，但是由于图片比文字所占内存更大，所以所耗的时间会多一些，因此可以尝试使用多线程爬虫来爬取网站的图片。 再来看看页面页码的元素： 要获取的是总页面数1690，则找到下图它的定位元素： 用BeautifulSoup的css路径选择器根据它的css...

2018-07-18 01:15:48

1, 函数名的应用,第一类对象 函数名可以像变量一样进行使用 1.赋值 2.作为list元素 3.作为参数 4.作为返回值 2, 闭包 内部函数访问外部函数的局部变量. 好处: 1.安全 2.常驻内存. 提高效率 3, 迭代器 可迭代对象(Iterable):内部包含__iter__(). 迭代器(Iterator): 内部...

2018-07-18 01:15:43

python3中str默认为Unicode的编码格式 Unicode是一32位编码格式，不适合用来传输和存储，所以必须转换成utf-8，gbk等等 所以在Python3中必须将str类型转换成bytes类型的 在Python中使用encode的方式可以进行字符的编码 实际用法： a = "中国" a.encode("utf-8") b'\xe4...

2018-07-18 01:15:45

from urllib import request class Spider(): url='https://www.panda.tv/cate/lol' #目录地址 def __fetch__content(self): #定义私有方法，要取得页面内容 r=request.urlopen(Spider.url) #通过request.urlopen()函数得到 htmls=r.read() #再通过read()读取出来 现在...

2018-07-18 01:15:41

一. 函数名的运用. 函数名是一个变量, 但它是一个特殊的变量, 与括号配合可以执行函数的变量. 1. 函数名的内存地址 def func(): print ( " 呵呵 " ) print (func) 结果: function func at 0x1101e4ea0 2. 函数名可以赋值给其他变量 def func(): print ( " 呵呵 " ) pri...

2018-07-18 01:15:42

上一篇：LeetCode子域名访问计数-Python3.7五 题目：https://leetcode-cn.com/problems/score-after-flipping-matrix/description/ 废话：这次真的比以往的要难做，初次看题目，懵逼！题目都没懂！！！换个日子，咦？可以做做喔！ 有一个二维矩阵 A 其中每个元素的值为...

2018-07-18 01:15:41

上一篇：LeetCode 键盘行四 题目：https://leetcode-cn.com/problems/subdomain-visit-count/description/ 一个网站域名，如"discuss.leetcode.com"，包含了多个子域名。作为顶级域名，常用的有"com"，下一级则有"leetcode.com"，最低的一级为"discuss.leetcode.com"。...

2018-07-17 04:06:17

爬虫对目标网页爬取的过程可以参考下面黑色文字部分： 首先访问初始url，获取其相应内容对相应内容进行解析，提取感兴趣的信息和新的链接将上一步提取到的数据存储，将获取到的链接去重并存储至仓库从url仓库获得一条未爬取过的url，开始新的循环 图片中由黑色文字组成...

2018-07-17 04:06:15