爬虫新练习

Posted 095罗冠达

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫新练习相关的知识,希望对你有一定的参考价值。

import requests
import re
from bs4 import BeautifulSoup

url="http://news.gzcc.cn/html/xiaoyuanxinwen/"
res=requests.get(url)
res.encoding="utf-8"

url1="http://oa.gzcc.cn/api.php?op=count&id=9183&modelid=80"
res1=requests.get(url1)
print(res1.text.split(".html")[-1].lstrip("(‘").rstrip("‘);"))

newUrl =http://news.gzcc.cn/html/2018/xiaoyuanxinwen_0404/9183.html
re1 = re.search(\_(.*).html,newUrl)
re2 = re.match(http://news.gzcc.cn/html/2018/xiaoyuanxinwen_(.*).html,newUrl)
print(re1.group(1).split(/)[-1],re2.group(1).split(/)[-1])

 

以上是关于爬虫新练习的主要内容,如果未能解决你的问题,请参考以下文章

爬虫新练习

scrapy按顺序启动多个爬虫代码片段(python3)

scrapy主动退出爬虫的代码片段(python3)

全网最有效爬虫练习,练习完可就业(源代码交流)

Python爬虫练习:爬取美团网成都地区的酒店信息

第二关:爬虫HTML网页基础(附练习题)