Scrapy爬取新浪微博用户信息用户微博及其微博评论转发

Posted 2021-06-13 刘润森！

tags:

篇首语：本文由小常识网(cha138.com)小编为大家整理，主要介绍了Scrapy爬取新浪微博用户信息用户微博及其微博评论转发相关的知识，希望对你有一定的参考价值。

新浪微博是国内主要的社交舆论平台，对社交媒体中的数据进行采集是舆论分析的方法之一。

本项目无需cookie，可以连续爬取一个或多个新浪微博用户信息、用户微博及其微博评论转发。

选择爬取的用户：https://weibo.com/u/5806943776 ID 是5806943776

抓取用户信息

scrapy crawl user

在这里插入图片描述

抓取用户微博

scrapy crawl mblog

以上是关于Scrapy爬取新浪微博用户信息用户微博及其微博评论转发的主要内容，如果未能解决你的问题，请参考以下文章