jieba库的基本介绍及爬虫基本操作

jieba库基本介绍

jieba库的安装

pip install jieba (cmd命令行)

 

 

 

 

 

jieba分词的三种模式

精确模式、全模式、搜索引擎模式

精确模式：把文本精确的切分开，不存在冗余单词

全模式：把文本中所有可能的词语都扫描出来，有冗余

搜索引擎模式：在精确模式基础上，对长词再次切分

 

 

 爬虫（爬取哔哩哔哩视频弹幕）

导入模块

 

 

 爬取数据