详解Python用三种方式统计词频的方法

首先，我们需要明确下面几点内容：

1. 什么是词频统计？

   词频统计是指统计一篇文章或一个文本中每个单词出现的次数。

2. Python中有哪些可以用来统计词频的方法？

   在Python中，可以采用以下三种方式来统计词频：

   • 使用Python内置函数和数据结构
   • 使用第三方模块collections中的Counter
   • 使用第三方模块NLTK中的FreqDist

接下来，我们分别介绍这三种方式的实现方法：

一、使用Python内置函数和数据结构

Python内置了几个数据结构可以很方便地用来实现词频统计，比如列表和字典。下面是使用Python内置函数和数据结构来实现词频统计的示例代码：

text = 'apple banana orange apple orange pear'
words = text.split()
freq = {}
for word in words:
    if word in freq:
        freq[word] += 1
    else:
        freq[word] = 1
print(freq)

运行结果：

{'apple': 2, 'banana': 1, 'orange': 2, 'pear': 1}

二、使用第三方模块collections中的Counter

collections模块是Python标准库中的一个扩展工具箱，提供了一些实用的数据结构和函数。其中的Counter类提供了一个简单而有效的方式来统计词频。下面是使用collections中的Counter来实现词频统计的示例代码：

from collections import Counter
text = 'apple banana orange apple orange pear'
words = text.split()
freq = Counter(words)
print(freq)

运行结果：

Counter({'apple': 2, 'orange': 2, 'banana': 1, 'pear': 1})

三、使用第三方模块NLTK中的FreqDist

NLTK是Python中常用的自然语言处理工具包，提供了一些有用的函数和数据集。其中的FreqDist类提供了一种统计文本词频的方式。下面是使用NLTK中的FreqDist来实现词频统计的示例代码：

import nltk
from nltk import FreqDist
nltk.download('punkt')
text = 'apple banana orange apple orange pear'
words = nltk.word_tokenize(text)
freq = FreqDist(words)
print(freq)

运行结果：

<FreqDist with 4 samples and 6 outcomes>

注意：尽管最后的结果比较简略，但是FreqDist对象提供了一个可以很方便地从中提取统计信息的接口，比如可以通过freq.plot()绘制出词频分布图。

以上就是“详解Python用三种方式统计词频的方法”的完整攻略，希望对你有所帮助！