Python统计词频的几种方法小结

本文主要介绍了Python统计词频的几种方法小结,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧

本文介绍python统计词频的几种方法,供大家参考

方法一:运用集合去重方法

 def word_count1(words,n): word_list = [] for word in set(words): num = words.counts(word) word_list.append([word,num]) word_list.sort(key=lambda x:x[1], reverse=True) for i in range(n): word, count = word_list[i] print('{0:<15}{1:>5}'.format(word, count)) 

说明:运用集合对文本字符串列表去重,这样统计词汇不会重复,运用列表的counts方法统计频数,将每个词汇和其出现的次数打包成一个列表加入到word_list中,运用列表的sort方法排序,大功告成。

方法二:运用字典统计

def word_count2(words,n): counts = {} for word in words: if len(word) == 1: continue else: counts[word] = counts.get(word, 0) + 1 items = list(counts.items()) items.sort(key=lambda x:x[1], reverse=True) for i in range(n): word, count = items[i] print("{0:<15}{1:>5}".format(word, count)) 

方法三:使用计数器

def word_count3(words,n): from collections import Counter counts = Counter(words) for ch in "":  # 删除一些不需要统计的元素 del counts[ch] for word, count in counts.most_common(n):  # 已经按数量大小排好了 print("{0:<15}{1:>5}".format(word, count)) 

到此这篇关于Python统计词频的几种方法小结的文章就介绍到这了,更多相关Python统计词频内容请搜索0133技术站以前的文章或继续浏览下面的相关文章希望大家以后多多支持0133技术站!

以上就是Python统计词频的几种方法小结的详细内容,更多请关注0133技术站其它相关文章!

赞(0) 打赏
未经允许不得转载:0133技术站首页 » python