python爬虫模块的安装

Posted tangkaishou

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了python爬虫模块的安装相关的知识,希望对你有一定的参考价值。

1.Requests模块的安装

1 pip3 install requests

 

技术分享图片
1 #调用:
2 import requests
3 
4 response = requests.get(https://www.baidu.com)
5 
6 print (response.url)
7 print (response.text)
View Code

 

 

 

2.selenium + webdriver 模块

安装selenium

技术分享图片
1 pip3 install selenium
View Code

安装webdriver (chromedriver为例)

 1.点击进行下载相对应的版本 当然本地电脑要安装谷歌浏览器

 2.解压 然后把.exe 文件copy到python3目录下的script目录下

 3.安装完毕

技术分享图片
1 #调用
2 from selenium import webdriver
3 browser = webdriver.Chrome()
4 browser.get(https://www.baidu.com)
View Code

 

以上是关于python爬虫模块的安装的主要内容,如果未能解决你的问题,请参考以下文章

Python练习册 第 0013 题: 用 Python 写一个爬图片的程序,爬 这个链接里的日本妹子图片 :-),(http://tieba.baidu.com/p/2166231880)(代码片段

Python爬虫:requests模块使用

python爬虫模块的安装

Python爬虫常用模块安装

python3爬虫lxml模块的安装

入门学Python一定要知道的requests模块安装及使用