爬虫的学习

Posted 2021-02-19 lxw2020

1.用requests库的ge()函数反问一个网站20次，打印返回状态，text()内容，计算text()属性和content()属性所返回网页内容的长度。

1 import requests
2 for i in range(20):
3     r=requests.get("http://www.googlen.org/")
4     print(r.raise_for_status())
5     r.encoding=‘utf-8-sig‘
6     file_handle=open(‘1.txt‘,mode=‘w‘)
7     file_handle.write(r.text)
8     print("{},{}".format(len(r.text),len(r.content)))
9 file_handle.close()