爬虫基础简介

Posted sr-program

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫基础简介相关的知识,希望对你有一定的参考价值。

一:爬虫简介

(1)图解:

技术图片

 (2)互联网

1:什么是互联网

(1)互联网由pc 网线 交换机 路由器 防火墙互连在一起 连接成一张网状的样式

2:互联网建立的目的

(1) 互联网建立的核心价值 --->数据共享以及传递

(2)互联网建立就是为了将彼此连接在一起使其逻辑跨越空间的限制 ---> 可以实现数据的共享传递

3:什么是上网

(1)作为客户端浏览器向服务端发送请求

(2)服务端接收到客户端的数据请求 进行数据查找 返回给客户端

(3)客户端接收到服务端的数据 进行渲染等

4:爬虫

(1)模拟客户端的请求(浏览器的请求)向服务端发送请求

(2)获取服务端返回的数据

(3)筛选我们所需要的数据

(4)将筛选结果保存

PS:

(1)如果将互联网比作一张大网

(2)那么一台计算机上的数据便相当于一个个猎物

(3)爬虫程序相当于猎人 在互联网上获取猎物

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

 

以上是关于爬虫基础简介的主要内容,如果未能解决你的问题,请参考以下文章

python爬虫----scrapy框架简介和基础应用

爬虫学习 10.scrapy框架简介和基础应用

python爬虫零基础实战

零基础自学Python 3开发网络爬虫: 用到的数据结构简介以及爬虫Ver1.0 alpha

Python 开发简单爬虫 - 基础框架

网络爬虫技术入门_Python基础与爬虫技术