码迷,mamicode.com
首页 > 其他好文 > 详细

中文词频统计

时间:2018-03-28 16:47:42      阅读:133      评论:0      收藏:0      [点我收藏+]

标签:[1]   reverse   nes   items   blog   for   big   open   jieba   

import jieba

news = open(bignews.txt,r).read() 

news_cut = jieba.lcut(news)

dict = {}

for i in set(news_cut):
    dict[i]=news_cut.count(i)
    delete={,,,,,,,,  ,-,\n,,,,,,,,,,.,,}

for i in delete:
    if i in dict:
        del dict[i]

nesw_print = sorted(dict.items(), key = lambda d:d[1], reverse = True)

for i in range(10):  
    print(nesw_print[i])

技术分享图片

中文词频统计

标签:[1]   reverse   nes   items   blog   for   big   open   jieba   

原文地址:https://www.cnblogs.com/FZW1874402927/p/8664353.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!