如何安装selenium以及scrapy,最重要的是pip?

Posted 谦曰盛

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了如何安装selenium以及scrapy,最重要的是pip?相关的知识,希望对你有一定的参考价值。

一般的步骤:

 # Selenium安装配置       
# 1. 安装python的selenium包:pip install selenium
# 2. Selenium驱动(Chrome)下载:   也就是最好用Chrome浏览器
# 3. 驱动下载后放在任意位置,但需要把路径添加到PATH环境变量。

 题记:本来一开始觉得写得挺仔细的,但是后来换了固态硬盘重新装的时候发现写得不仔细,所以又

重新修改一下。

  

  如果想用pip install .... 结果发现pip 指令无法识别的时候,参考下帖:

  鄙人使用的环境是anaconda,如果是Python等其他的软件,请参考下帖地址,

 

  pip一开始出现下图问题

 无论是手动安装,还是自动安装,都是出现识别不了的问题:

 

包括conda  也显示不出来命令

 

 

 就觉得应该是pip识别不了的问题。

 直到我上网查如何安装pip, 才出现了转机,

原帖子如下

注意,我的环境的anaconda,所以,配置anaconda的scripts的环境变量!

同时,一个进入对应文件夹cmd的便捷方法是在对应的文件夹下,直接输入cmd,如图

 

   敲回车:

 

 

尽管跟着照做,还是出现了这一幕:

 

直到看到这句话:

 

 

一直在想,我以前也装过Python3 的呀?为什么要卸载呢?

然后突然发现,一个问题:

 我后来又重新装了anaconda,但是,根据帖子的做法,我把以前的Python3的。。。scripts的路径给pip安装了,

也就是:

我装错pip了!!!

不对的路径 装完的图片是这样的:

 

 

然而,你一般是无法判断出来的。。。

有个小插曲,记得复制到path路径的时候,要切换到英文输入法,如图的位置,一个中文的分号都会导致错误,

下面是改过来的: 

 

 而通过anaconda装完selenium的图片是这样的:

 

 你看,pip、conda list等命令都会出现巴拉巴拉的东西:

 

 

 

 

 可以不需要卸载原来的Python,但是路径别搞混了

 记住:是anaconda中的scripts的路径,怎么找呢?

有anaconda的快捷方式,通过快捷方式找到,查询快捷方式的路径,一步一步。。

 

 如果要安装scrapy,因为最主要的pip已经搞定,剩下的都很轻松,只需要根据网上的教程一步一步来就好了。

比如下面的帖子

 

 

 

 

 

或者好朋友pengzx的文件图

 

 

 辣么,现在还有一个问题还没有解决:如何安装Chrome驱动???

 

 SO,接下来的一篇blog就写如何解决这个问题的啦! ٩꒰▽ ꒱۶⁼³₌₃ 学习去咯

 

以上是关于如何安装selenium以及scrapy,最重要的是pip?的主要内容,如果未能解决你的问题,请参考以下文章

如何在python中使用selenium或scrapy单击“下一步”按钮

如何在scrapy中集成selenium爬取网页

运用scrapy加上selenium爬取校园网课表

使用 Selenium 爬行但不爬行的 Scrapy

如何用python+selenium+phantomjs获得一个网页的动态生成的html代码

小白学 Python 爬虫(40):爬虫框架 Scrapy 入门基础对接 Selenium 实战