URL库函数

Posted 2022-04-16 lumc5

1.urlopen

      from urllib import request

      resp=request urlopen(‘http://www.baidu.com‘)

      print(resp.read())

2.urlretrieve

      from urllib import request

      request urlretrieve(‘http://www.baidu.com‘,‘文件名‘)

3.urlencode

      编码函数  注意从urllib库中引入parse  

      params="name":‘‘张三"

      result=parse.urlencode(params)

      print(result)

4.parse_qs

      解码函数

      params="name":"张"

      qs=parse.urlencode(params)

       print(qs)

       result=parse.parse_qs(qs)

       print(result)

5.urlparse

      解析文件的每一个部分

      url=‘http://www........‘

      result=parse.urlparse(url)

      print(‘scheme‘,result.scheme)

      print(‘netloc‘,result.netloc)

6.urlsplit

      与5的功能相同，但是6缺少对params 的解析

7.request

     爬取具体信息 所用的url

     检查--NET--POSITION--REQUEST URL