【摘要】：正在如今信息科学技术迅速发展的时代背景下,大数据分析在我们的日常生活中发挥着越来越大的作用。而作为信息交互的平台—微博,为我们提供了多层次以及能够随意交流自己言论的功能。如何知道一篇文章下的评论数和评论内容,本论文研究了利用网络爬虫算法来收集微博评论,主要是模拟浏览器来抓取微博评论,该算法对于较多评论能够快速爬取,节省了许多时间,只需要4min左右就能够爬取全部评论。

【相似文献】

中国期刊全文数据库 前18条

1 彭复明;姚敏;白顺科;;通用进化算法的收敛性分析[J];计算机应用;2013年06期

2 高春生;吴霖;;基于Google PageRank算法的围棋棋手排名方法[J];信息技术;2016年11期

3 燕海;;算法无处不在[J];风流一代;2020年09期

4 张铭皓;;掌控还是被掌控——大数据时代有关算法分发的忧患与反思[J];新媒体研究;2020年04期

5 迪莉娅;;大数据算法决策的问责与对策研究[J];现代情报;2020年06期

6 袁帆;严三九;;模糊的算法伦理水平——基于传媒业269名算法工程师的实证研究[J];新闻大学;2020年05期

7 杨灿;;算法推荐新闻对用户的影响及对策[J];新媒体研究;2020年10期

8 聂静虹;宋甲子;;泛化与偏见:算法推荐与健康知识环境的构建研究——以今日头条为例[J];新闻与传播研究;2020年09期

9 古婷婷;;蚁群算法在文字识别中的应用研究[J];信息与电脑(理论版);2019年22期

10 郭雯雯;邵全义;;大数据聚类算法研究[J];无线互联科技;2018年04期

11 廖彬宇;赖晓风;;RSA算法的改进研究[J];计算机与网络;2018年14期

12 廖彬宇;;改进的负载均衡RSA算法[J];电脑知识与技术;2018年25期

13 刘韶涛;李洪胜;;融合链接结构的主题爬虫算法[J];华侨大学学报(自然科学版);2017年02期

14 贾静平;覃亦华;;基于深度学习的视觉跟踪算法研究综述[J];计算机科学;2017年S1期

15 张玉宏;秦志光;肖乐;;大数据算法的歧视本质[J];自然辩证法研究;2017年05期

16 张翼鹏;葛丽娜;王红;王丽颖;张静;;基于改进细菌觅食算法的舆情热点话题发现[J];计算机工程与设计;2017年10期

17 潘树琼;;算法能决定一切吗？[J];网络传播;2020年09期

18 胡茂林;徐寅峰;徐维军;;离线k-服务器问题算法的改进[J];数学的实践与认识;2008年11期