纲要-Java网络爬虫系统性学习与实战

Posted 2021-06-30 谙忆

纲要-Java网络爬虫系统性学习与实战（1）

文章目录

• 介绍
• 郑重声明
• 适合人群
• 本系列内容
• 联系方式

系列文章地址：Java网络爬虫系统性学习与实战系列

介绍

网络上大部分都是Python爬虫，为什么大家喜欢用Python来写，方便呀。我自己也写过，确实方便。但是也有不好的地方。

我自己不是很喜欢用Python写爬虫，因为我有一个自己写的SaaS爬虫项目，用Java写的，元数据类型、爬取算法、数据解析、页面规则、任务调度、告警监控等等，如果用Python来写，我想我弄不来。

Python适合一些小的页面抓取，如果想做大，做成自动化，做成SaaS，Python可行，但是麻烦很多。Java强就强在生态，全能的事情用Java来干，基本不会有大问题，就算有疑难杂症，也会有一些解决方案。而且对于我这种类型把Java作为主要开发语言的人来说，不喜欢用Python来写，其他人我不知道，至少我是不喜欢的。

奈何，网上关于Java爬虫的资料真的很少。也没有系统学习的方法，在这里，我系统的总结了一些知识，节省大家学习Java爬虫的时间。

本专栏的系列实战文章会无限增加。本文最后有我的联系方式、微信&QQ。

如果有新网站，大家想学习怎么用Java获取其中信息的，可以通过最后微信公众号联系我，我会一一写成实战，并将文章放入到该专栏（随着文章数量增多，价格会逐渐增加）。

郑重声明

本文中所有实战代码，均仅供读者进行技术交流、学习之用。

本文中所有实战代码，均不带任何恶意的高并发的请求，请相关平台放心。

读者擅自改动动脚本，涉嫌违法犯罪的，读者自行负责。

适合人群

• Java开发初学者
• 想学习爬虫的开发者
• 想了解如何规避爬虫风险的读者
• 想直接利用爬虫获取网站数据的读者

本系列内容

主要包含以下的一些内容（本篇内容会一直更新）：

• 纲要-Java网络爬虫系统性学习（1）
• 什么是爬虫-Java网络爬虫系统性学习（2）
• 了解爬虫的风险与以及如何规避风险-Java网络爬虫系统性学习（3）
• 在不同领域，大家用爬虫怎么盈利的-Java网络爬虫系统性学习（4）
• 个人怎么利用爬虫技术赚钱-Java网络爬虫系统性学习（5）
• 了解HTTP状态码-Java网络爬虫系统性学习（6）
  • 关于HTTP的一些介绍就不写了，不过如果有想学习的，可以评论下，人多的话，我就总结总结HTTP的知识点
• 分析CSDN文章列表页与文章详情页-Java网络爬虫系统性学习（7）
• xPath基本语法规则-Java网络爬虫系统性学习（8）
• 常见的一些反爬虫策略(上篇)-Java网络爬虫系统性学习（9）
• 常见的一些反爬虫策略(下篇)-Java网络爬虫系统性学习（10）
• 常见的一些反爬虫策略破解方式-Java网络爬虫系统性学习（11）
• CSDN网站作者的文章列表&文章详情获取-Java网络爬虫实战学习（12）
• InfoQ网站作者的文章列表&文章详情获取-Java网络爬虫实战学习（13）
• 开源中国网站作者的文章列表&文章详情获取-Java网络爬虫实战学习（14）
• 掘金网站作者的文章列表&文章详情获取-Java网络爬虫实战学习（15）
• 博客园网站作者的文章列表&文章详情获取-Java网络爬虫实战学习（16）

本篇文章后续还会跟着内容随时更新。

联系方式

公众号名称：程序编程之旅

关注公众号即可获取联系方式。