前言
本文是该专栏的第34篇,后面会持续分享python爬虫干货知识,记得关注。
在本文中,笔者将通过某汽车平台,来采集“中国汽车市场”的月销量数据。
具体实现思路和详细逻辑,笔者将在正文结合完整代码进行详细介绍。废话不多说,下面跟着笔者直接往下看正文详细内容。(附带完整代码)
正文
地址:aHR0cHM6Ly93d3cuMTY4ODguY29tLw==
目标:采集“中国汽车市场”的月销量数据
1. 请求方式和参数分析
老规矩,我们在通过解码方法获取上述链接之后。直接进入到“中国汽车销量”数据页面,会看到如下图所示的页面信息:
然后,我们要做的就是按F12快捷键或者ctrl+shift+I组合键启动控制台,并点击控制台右侧的Preserve log。
紧接着,我们接下来要做的事情,就是尝试用鼠标滑到页面底部的翻页按钮处,并随机点击几次翻页按钮。观察控制台右侧的Network下