现代计算机2022,Vol.28Issue(14) :49-54,95.DOI:10.3969/j.issn.1007-1423.2022.14.007

基于Scrapy的食品安全舆情数据爬取与分析

Crawling and Analysis of Food Safety Public Opinion Data Based on Scrapy

魏海昱 林伟鸿 贺超波
现代计算机2022,Vol.28Issue(14) :49-54,95.DOI:10.3969/j.issn.1007-1423.2022.14.007

基于Scrapy的食品安全舆情数据爬取与分析

Crawling and Analysis of Food Safety Public Opinion Data Based on Scrapy

魏海昱 1林伟鸿 1贺超波1
扫码查看

作者信息

  • 1. 仲恺农业工程学院信息科学与技术学院,广州 510225
  • 折叠

摘要

随着移动互联网的普及与在线视频平台的流行,食品安全舆情信息呈现出复杂化、多样化的特点.运用网络爬虫技术爬取食品安全视频的相关评论数据,经过分析可以为食品安全舆情事件的引导提供重要依据.本文通过分析动态网页的爬取技术原理,基于Scrapy框架结合逆向分析与Selenium自动爬取策略对哔哩哔哩网站进行数据爬取,并以"黑心料理包"视频评论产生的舆情为案例进行分析,结果发现互联网用户对食品安全事件的关注趋势和讨论焦点.

关键词

食品安全舆情/数据爬取/动态网页/网络爬虫/Scrapy

引用本文复制引用

基金项目

广州市科技计划(201905010006)

出版年

2022
现代计算机
中大控股

现代计算机

影响因子:0.292
ISSN:1007-1423
被引量4
参考文献量5
段落导航相关论文