Ajax数据爬取

Posted 2021-03-21 yelan5222

Ajax数据爬取

简介

数据加载是异步加载，局部刷新。web开发的前后端分离通常都用Ajax交互，降低了服务器直接渲染页面带来的压力

基本原理

1. 发送请求

2. 解析内容

3. 渲染网页

其实就是 向后端指定接口发送请求，返回数据，渲染页面

JS对Ajax底层的实现，实际上是新建了一个XMLHttpRequest对象

 

Ajax分析方法

发送的请求类型为 XHR ；Request Headers 中就有一条信息为 X-Request-With:XMLHttpRequest ,这就标记了该请求为Ajax请求；返回的数据可能是json 也可能html 。

 

实例

例如腾讯招聘，微博等；这些网站都是前后端分离的

 

补充

Croptydomex 密码库 des aes rsa

pip install execjs # 执行代码的模块

/# 安装nodejs

sudo apt-get install nodejs

 import execjs
 ?
 print(execjs.eval(‘var a = "hello world"‘))

 

 # 修改某文件/文件夹所有权限
 sudo chmod -R 777 folder
 sudo chmod -RF 777 file