jieba库的基本介绍及爬虫基本操作

Posted lvguchujiu

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了jieba库的基本介绍及爬虫基本操作相关的知识,希望对你有一定的参考价值。

jieba库基本介绍

jieba库的安装

pip install jieba (cmd命令行)

技术图片

 

 

 技术图片

 

 

jieba分词的三种模式

精确模式、全模式、搜索引擎模式

精确模式:把文本精确的切分开,不存在冗余单词

全模式:把文本中所有可能的词语都扫描出来,有冗余

搜索引擎模式:在精确模式基础上,对长词再次切分

技术图片

 

 

 爬虫(爬取哔哩哔哩视频弹幕)

导入模块

技术图片

 

 

 爬取数据

技术图片

技术图片

 

以上是关于jieba库的基本介绍及爬虫基本操作的主要内容,如果未能解决你的问题,请参考以下文章

Python:jieba库的介绍与使用

python网络爬虫requests库的基本介绍和使用

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

Python 爬虫之urllib库,及urllib库的4个模块基本使用和了解

python jieba库的使用说明

Python jieba 库的使用说明