ubuntu 搭建python2.x 抓取环境

Posted 播种的季节

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了ubuntu 搭建python2.x 抓取环境相关的知识,希望对你有一定的参考价值。

1.apt-get install python-bs4

bs4只有py2的代码,安装在py3下会很麻烦

bs4支持html parser,也可以支持第三方的分析器

2.apt-get install python-lxml

3. apt-get install python-html5lib

-------------------------------

4.抓取程序

https://github.com/yfjelley/checkproxy

以上是关于ubuntu 搭建python2.x 抓取环境的主要内容,如果未能解决你的问题,请参考以下文章

Ubuntu16.04下Scrapy环境的搭建

如何在同一台电脑(windows系统)上同时搭建python2和python3环境

Windows系统下Python环境的搭建

总结:Ubuntu Python2.x和Python3.x共存,并将Python版本设成3

Ubuntu下安装pip3和Python的第三方库

Windows下安装python2和python3双版本