基于语义情感分析的网络爬虫舆情分析系统

作  者: 普布卓玛;仁增卓嘎
摘  要: 网络热点是一种在互联网上短时间内爆发并形成一定程度的公众关注与热议的社会事件,对其进行舆情监测是一种有效的方法。本项目拟以一个热门话题为案例,采用 Scrapy 技术采集今日头条的评论数据,采用中文自动分词软件(jieba),采用 TF-IDF、TextRank 等方法对其进行处理,并将其进行对比,通过 SnowNLP 类库实现情感分析,通过 NLPIR 自动分词系统实现依存句法的解析和可视化,最终通过 Wordcloud 库产生词云,实现对关键信息的快速、可视化提取,展示在热门热点事件中,大众对某一热点的看法。本课题的研究成果可为网络热点事件的有效防控与应对、多维度的事件处理与分析、以及加强网络热点事件的舆论控制等工作提供技术支持。
来  源: 《信息产业报道》 2025-03