首页/新闻资讯/正文详情

CSDN 2021-2022年微博情感数据分析

发布时间:2026/9/26 1:59:36 来源:云帆数科 栏目:资讯中心
CSDN 2021-2022年微博情感数据分析
新年第一篇,承蒙邹总邀请 一个实际的大数据分析例子CSDN 上已经有很多关于爬虫* 的博客和代码,还有很多关于 情感分析 的研究和实战例子,既然大家对这个技术都这么感兴趣就来一个真实的例子,看看大家在解决实际问题的能力如何。 CSDN 的很多用户都在各个微信群、社区里面表达过对 CSDN 的各种反馈,这些人和众多普通用户相比,还是很少的一部分,那么怎样收集到散落在网上的各种反馈和评论,并做定性、定量的分析呢? 这就需要数据挖掘、自然语言处理、情感分析、和数据可视化的技巧了。快来看看过去的2年中你心中的CSDN情感评价是否是这样的?微博情感分析是一种用于提取微博文本中的情感倾向的方法。它可以帮助企业了解人们对于某个主题的看法和态度。如果要进行微博情感分析,需要准备一些微博数据。可以使用爬虫程序爬取相关微博数据,这里使用的 Scrapy 框架进行的数据爬虫。可以使用文本分类模型对微博数据进行情感分类。在这里准备了一些情感标签(例如“正面”、“负面”、“中立”),并为每条微博打上标签。此外,可以使用自然语言处理技术来提取微博中的关键词和主题,以便更好地了解人们关注的焦点。总的来说微博情感分析是一种有用的工具,可以帮助您更好地了解人们对于某个主题的看法和态度。接下来让我们看看如何实现的吧,以及这两年CSDN的外部综合评价是否和你想的一样。文章目录Scrapy 网络爬虫Scrapy 核心代码Scrapy 启动Python 数据分析构建情感分类信息基础数据清洗整理词云可视化年度用户发帖量对比用户发帖渠道对比用户发帖时间每月用户情感倾向PyEcharts 动态情感分析情感得分汇总对比Scrapy 网络爬虫这里使用的 Scrapy 框架是 2.6.x 框架,由于整个过程中没有被微博服务器反爬,因此就没有浪费代理池的资源,不过在框架代码中我按照习惯还是设置了。Scrapy 核心代码settings.py,这里主要配置了爬虫的客户端以及抓取微博数据需要设置的 Cookie 信息,在每次启动爬虫任务的时候需要自己手动更新 Cookie 进行替换。打码的地方自己完全复制过来就好了。BOT_NAME='spider'SPIDER_MODULES=['spiders']NEWSPIDER_MODULE=

相关推荐

C语言-----程序控制结构和语句(1)
C语言-----程序控制结构和语句(1)

目录 1、语句 1.1基本赋值语句 1.2表达式语句 1.3基本输入/输出语句 1.3.1基本输出语句 1.3.2 基本输入语句 1.4控制语句 1.5空语句和复合语句 2、顺序结构与语句 3、选择结构和语句 3.1选择结构 3.2单分支选择结构-----if 语句 3.3双分支选择结构-----if-e… · 2026/9/26 1:59:36

C语言-----程序控制结构和语句(2)
C语言-----程序控制结构和语句(2)

目录 1、循环结构与语句 1.1 循环结构 1.2 当型循环语句----- for 语句 1.3 当型循环语句----- while 语句 1.4 直到型循环语句----- do-while 语句 1.5 循环的嵌套 2、转向语句 2.1 goto 语句 2.2 break 语句 2.3 continue 语句 本章博客是对程序控制结构和… · 2026/9/26 1:59:36

C语言-----输入和输出
C语言-----输入和输出

目录 1、格式化输入输出 1.1 格式化输出函数-----printf() 1.2 格式控制字符 1.3 格式化输入函数-----scanf() 2. 字符输入输出 2.1 字符输出函数-----putchar() 2.2 字符输入函数-----getchar() 3. 字符串输入输出 3.1 字符串输出函数-----puts() 3.2 字符串输入… · 2026/9/26 1:59:36

前端设计系统实战指南:基于 Dillinger 仓库 frontend-design Skill 的 UI 设计决策方法论
前端设计系统实战指南:基于 Dillinger 仓库 frontend-design Skill 的 UI 设计决策方法论

前端开发工具 【免费下载链接】dillinger The last Markdown editor, ever. 项目地址: https://gitcode.com/gh_mirrors/di/dillinger 点击查看 免费下载 导读 本文基于开源仓库 Dillinger("The last Markdown editor, ever.")中… · 2026/9/26 2:36:17

终极指南:如何用Pyxel创建复古跳跃游戏(从零到完整项目)
终极指南:如何用Pyxel创建复古跳跃游戏(从零到完整项目)

终极指南:如何用Pyxel创建复古跳跃游戏(从零到完整项目) 【免费下载链接】pyxel A retro game engine for Python 项目地址: https://gitcode.com/GitHub_Trending/py/pyxel Pyxel是一款专为Python设计的复古游戏引擎,让开… · 2026/9/26 2:36:17

终极指南:如何在浏览器中快速运行Python复古游戏
终极指南:如何在浏览器中快速运行Python复古游戏

终极指南:如何在浏览器中快速运行Python复古游戏 【免费下载链接】pyxel A retro game engine for Python 项目地址: https://gitcode.com/GitHub_Trending/py/pyxel 想要在浏览器中轻松运行Python游戏吗?Pyxel Web版本让这一切变得简单&#xff… · 2026/9/26 2:36:17

Oracle EBS库存模块中文版手册:八大核心流程与实施避坑指南
Oracle EBS库存模块中文版手册:八大核心流程与实施避坑指南

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/9/26 2:36:17

【题解-洛谷】P2014 [CTSC1997] 选课
【题解-洛谷】P2014 [CTSC1997] 选课

题目:P2014 [CTSC1997] 选课 题目描述 在大学里每个学生,为了达到一定的学分,必须从很多课程里选择一些课程来学习,在课程里有些课程必须在某些课程之前学习,如高等数学总是在其它课程之前学习。现在有 NNN 门功课&a… · 2026/9/26 2:36:17

群晖NAS第三方硬盘兼容解锁:3步把硬盘写进兼容数据库
群晖NAS第三方硬盘兼容解锁:3步把硬盘写进兼容数据库

群晖NAS第三方硬盘兼容解锁:3步把硬盘写进兼容数据库 【免费下载链接】Synology_HDD_db Add your HDD, SSD and NVMe drives to your Synologys compatible drive database and a lot more 项目地址: https://gitcode.com/GitHub_Trending/sy/Synology_HDD_db … · 2026/9/26 2:36:11

数据库课后习题答案别硬背:当测试用例集刷,效率翻倍
数据库课后习题答案别硬背:当测试用例集刷,效率翻倍

简介:万常选版《数据库原理与设计》课后习题答案资源,覆盖第2至6章及第9章,适合正在学习关系模型、数据库建模、关系数据理论与模式求精的本科生、自学者作为复习与自测材料。压缩包共7个文件,含3个doc参考答案、2个sql示例脚本、… · 2026/9/26 0:00:21

OpenClaw 替代品?Hermes Agent 踩坑实录:macOS 飞书接入 TaoToken 配置
OpenClaw 替代品?Hermes Agent 踩坑实录:macOS 飞书接入 TaoToken 配置

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views … · 2026/9/26 0:00:40

向下兼容与向上兼容:接口设计中的兼容性策略与工程实践
向下兼容与向上兼容:接口设计中的兼容性策略与工程实践

一次版本升级事故,是很多团队绕不过去的坎。线上环境里,服务端明明已经上线了新版接口,老的移动端还在照着旧文档传参数。请求一到网关,校验直接拒绝,用户操作失败,客服群炸了锅,开发群里开始互… · 2026/9/26 0:00:46

了解更多?预约专属演示

我们的顾问将为您一对一讲解产品与方案

企业微信二维码