什么是爬虫-Java网络爬虫系统性学习与实战

Posted 2021-06-30 谙忆

什么是爬虫-Java网络爬虫系统性学习与实战（2）

文章目录

• 我的简单理解
• 维基百科的定义
• 爬虫策略
• 爬虫核心点
• 爬虫的要素
• 联系方式

Java网络爬虫系统性学习与实战系列

上一篇文章： 纲要-Java网络爬虫系统性学习与实战（1）

我的简单理解

没有过多的定义爬虫这个词的话，一般来说，爬虫指的是网络爬虫。

最开始接触编程时，我完全不明白到底爬虫是个什么东西。网络上爬来爬去的虫子？

现在看来，如果把整个万维网看成是网状的，站点之间通过超文本链接互相连接。那么其实把爬虫理解成虫子在网上爬来爬去也未尝不可。

维基百科的定义

那么看看维基百科对于网络爬虫的一个定义吧：

网络爬虫（英语：web crawler），也叫网络蜘蛛（spider），是一种用来自动浏览万维网的网络机器人。其目的一般为编纂网络索引。