如何使用python根据关键词抓取微博

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何使用python根据关键词抓取微博相关的知识,希望对你有一定的参考价值。

参考技术A 基本的套路就是利用微博账号模拟登陆,这个过程比较复杂,因为微博有加密处理,推荐去github下载一个python模拟登陆新浪的源码。
当你通过模拟登陆进入微博界面的时候,尝试如何用python的模块去提交query,然后通过beautifulsoup或者是httpparse来获取内容信息。当然,自己学习正则表达式来获取也是可以的。

python如何抓取新浪微博的微博内容

参考技术A 基于文本文档(Markdown) 设想好需要的基本需要的表、字段、类型;
使用 Rails Migration 随着功能的开发逐步创建表;
随着细节功能的开发、需求,逐步增加字段,删除字段,或者调整字段类型;
第一个 Release 的时候清理 Migrations 合并成一个;
随着后期的改动,逐步增加、修改、删除字段或表。
基本上我的所有项目都是这么搞的,这和项目是否复杂无关。本回答被提问者和网友采纳

以上是关于如何使用python根据关键词抓取微博的主要内容,如果未能解决你的问题,请参考以下文章

python如何抓取新浪微博的微博内容

如何通过python调用新浪微博的API来爬取数据

一篇文章教会你使用Python定时抓取微博评论

python网络编程新浪爬虫:关键词搜索爬取微博数据

Python爬虫:使用Appium在移动端抓取微博数据

Python爬虫:使用Appium在移动端抓取微博数据