7 实例1:京东商品页面的爬取

Posted sruzzg

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了7 实例1:京东商品页面的爬取相关的知识,希望对你有一定的参考价值。

 1 """实例1:京东商品页面的爬取"""
 2 
 3 
 4 import requests
 5 
 6 url = "https://item.jd.com/100012545852.html"
 7 try:
 8     # 更改头部信息
 9     kv = {user-agent: Mozilla/5.0}
10     r = requests.get(url, headers=kv)
11     r.raise_for_status()
12     r.encoding = r.apparent_encoding
13     # print(r.request.headers)
14     print(r.text[:1000])
15 except:
16     print("爬取失败")

 

以上是关于7 实例1:京东商品页面的爬取的主要内容,如果未能解决你的问题,请参考以下文章

Requests库网络爬虫实战

京东商品页面爬取

requests实例2:亚马逊网站商品网页的爬取

第一周 2(实战)

Scrapy实战---Scrapy对接selenium爬取京东商城商品数据

基于java的网络爬虫框架(实现京东数据的爬取,并将插入数据库)