简介
Python基于微博的舆情分析,情感分析可视化系统
微博舆情分析系统,项目后端分爬虫模块、数据分析模块、数据存储模块、业务逻辑模块组成。
功能包括
- 登陆注册
- 用户管理
- 热门事件展示
- 舆情分析,包括舆情分析,情感分类,用户分布,关键词云图,热门帖子,热门评论排名
- 舆情预警
- 个人信息管理
原文地址
先后进行了数据获取和筛选存储,对存储后的数据库数据进行提取分析处理等操作,得到符合需要的结构化数据,将处理后的数据根据需要进行分析,得到相关的可视化数据,然后提供对应的接口给前端页面,显示在项目的前端页面中。
使用Django进行整个项目框架的构建,爬虫部分模块使用requests官方依赖库进行数据获取,根据微博公开的api接口获取结构化json数据,然后使用pandas对数据进行筛选,处理和分析。
意义
微博舆情分析系统将通过计算机进行整体智能化操作,对于微博舆情分析系统信息的管理及数据保存都是非常多的,为用户提供一个智能化的管理信息平台,方便管理员可以随时随地的查看用户所需的详细信息及热点词统计内容,增加系统和用户之间的关系,并且对数据信息管理可以及时、准确、有效地进行系统化、标准化和有效化的工作。
技术栈
技术栈 | 说明 | 备注 |
---|---|---|
Django | 作为后端接口 | |
PyMySQL、Pandas | 链接 mysql | 【Python-数据分析】如何使用 pandas 快速读取 MySQL 数据表? |
snownlp | 情感分析,作为情感得分 | 日常笔记-snownlp情感分析计算情感得分 |
beautifulsoup4 | 爬虫,网页接口分析 | |
urllib3、requests | 网络请求 | |
certifi | 网络证书 | Python certifi:如何在Python中使用SSL证书 |
jieba | 关键词提取 | https://blog.csdn.net/FontThrone/article/details/72782499 |