文章目录
- 一、前言
- 二、定位关键参数
- 三、代码实现
- 四、参考文献
一、前言
任务十七:抓取这5页的数字,计算加和并提交结果
题目已经给出来标准答案,而且此题设置为“非常简单”其关键就是HTTP/2.0请求,打开控制台查看请求接口数据如下:
二、定位关键参数
可以看到控制台显示的是h2请求协议,现在很多爬虫库其实对 HTTP/2.0 支持得不好,比如大名鼎鼎的 Python 库 —— requests,到现在为止还只支持 HTTP/1.1,啥时候支持 HTTP/2.0 还不知道。
不过在Python 3.6及以后版本的标准库中,已经添加了对HTTP/2的支持。Python使用hyper
库提供对HTTP/2的支持。下面是一个使用hyper