绪论

上一个已经通过B站的API，来实现了对数据的读取，这篇文章就是，将数据存储在本地的TXT文件中
上一篇文章的连接：
链接: 使用python中的requests模块来实现B站视频数据的抓取

实现

实现大概分为三个步骤

1. 打开文件，遍历，获得视频的dvid
2. 根据读取到的ID，调用上一篇文章，获取视频数据
3. 获取到数据后，将数据添加到文档

PS ：数据的格式：时间，ID，标题，数字。。。描述

1 导入头文件

import requests
import json
import re
import os

2. 获得数据的函数

def getData(base_url):header={'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.75 Safari/537.36'}r = requests.get(base_url,headers=header )#获取网页的信息_json_data = json.loads(r.text)#将数据进行格式转换，这样方便处理'''下面就是各个参数的获取，也可以根据自己的实际情况进行数据的获取'''bvid = _json_data.get('data').get('bvid')#视频的编号title = _json_data.get('data').get('title')#视频的名称desc = _json_data.get('data').get('desc')#视频的描述view = _json_data.get('data').get('stat').get('view')#播放量danmaku = _json_data.get('data').get('stat').get('danmaku')#弹幕reply = _json_data.get('data').get('stat').get('reply')#评论favorite = _json_data.get('data').get('stat').get('favorite')#收藏coin = _json_data.get('data').get('stat').get('coin')#投币share = _json_data.get('data').get('stat').get('share')#转发like = _json_data.get('data').get('stat').get('like')#点赞#数据都在data中存起来，方便后续的统一存储data = ("bvid:"+bvid+" title:"+title+" desc:"+desc+" view:"+str(view)+" danmaku:"+str(danmaku)+" reply:"+str(reply)+" favorite:"+str(favorite)+" coin:"+str(coin)+" share:"+str(share)+" like:"+str(like)+"\n\n")return data#打印数据

3 获取dvid

#获取bvid
video_bvid=open('bvid.txt', encoding='gbk')
video_bvid_data=[]
for line in video_bvid:video_bvid_data.append(line.strip())
print(video_bvid_data)

4 获取数据，保存

#获取bvid
video_bvid=open('bvid.txt', encoding='gbk')
video_bvid_data=[]
for line in video_bvid:video_bvid_data.append(line.strip())
print(video_bvid_data)

后续

此功能基本实现对数据的自动统计

需要提升

1. 数据直接统计到excel？或者数据库
2. 配套的数据分析软件
3. 自动定时统计数据
4. 自动获取视频ID

还是要吐槽一下b站后台，显示的不炫酷