爬虫学习中遇到的问题

Posted leolaosao

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了爬虫学习中遇到的问题相关的知识,希望对你有一定的参考价值。

if __name__ == \'__main__\':

解释:https://zhuanlan.zhihu.com/p/21297237

\'gbk\' codec can\'t encode character \'\\u2b07\' in position 17: illegal multibyte sequence

解答:s.decode(\'gbk\', ‘ignore\').encode(\'utf-8′)           http://www.cnblogs.com/baiyuyang/archive/2011/10/29/2228667.html

或者添加   r.endcodding = r.apparent_endconding

以上是关于爬虫学习中遇到的问题的主要内容,如果未能解决你的问题,请参考以下文章

Python爬虫模拟登录遇到的问题——CSRF防御

Java 爬虫遇到需要登录的网站,该怎么办?

Java 爬虫遇到需要登录的网站,该怎么办?

爬虫第一步遇到的坑

做网络爬虫过程过程中遇到的问题

python爬虫中遇到的问题以及解决方法