爬虫安装流程

Posted huanghe932

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫安装流程相关的知识,希望对你有一定的参考价值。

1 64位安装python-3.5.2-amd64.exe
修改系统环境变量 给path 加上python安装的目录
修改或者新增用户环境变量 给path加上python的安装目录 及Scripts目录
2 cmd python -V 则显示python的版本信息
3 pip list 显示jar包列表
4 点击 两个py爬虫 看运行是否正常
a 不正常的话 打开py文件 一个个的import在dos中是否报错
b 报错的话 pip install 报错包名
c 会出现包的下载进程 百分率(%)加载
5 看py中数据库连接与生成路径是否正确
6 点击两个py文件爬取数据到对应的数据列及excel中
例如
用户环境变量 path D:python;D:pythonScripts;
系统环境变化 path D:python;
7 其他 如果pip 未安装
参照 https://jingyan.baidu.com/article/ff42efa9d630e5c19e220207.html 安装
















以上是关于爬虫安装流程的主要内容,如果未能解决你的问题,请参考以下文章

爬虫必备安装和使用Xpath正则表达式插件 以及 F12的抓包流程

爬虫流程总结

Python 小爬虫流程总结

python爬虫--基本流程

selenium+python爬虫全流程教程

scrapy-redis 分布式 案例一