1.jieba分词的安装 直接在cmd窗口当中pip install即可 2.jieba分词的介绍 jieba分词是目前比较好的中文分词组件之一，jieba分词支持三种模式的分词(精确模式、全模式、搜索引擎模式)，并且支持自定义词典(这一点在特定的领域很重要，有时候需要根据领域的需要来添加特定的词典 ...
分类：
编程语言 时间：
2019-07-04 00:50:31
阅读次数：
168
中文词频统计 1. 下载一长篇中文小说。 2. 从文件读取待分析文本。 3. 安装并使用jieba进行中文分词。 pip install jieba import jieba ljieba.lcut(text) 4. 更新词库，加入所分析对象的专业词汇。 jieba.add_word('天罡北斗阵' ...
分类：
其他好文 时间：
2019-06-19 19:58:28
阅读次数：
129
1、 templateMessage.getTemplateLibraryById 本接口应在服务器端调用，详细说明参见服务端API。 本接口支持云调用。需开发者工具版本 >= 1.02.1904090（最新稳定版下载），wx-server-sdk >= 0.4.0 获取模板库某个模板标题下关键词库 ...
分类：
微信 时间：
2019-06-19 10:05:19
阅读次数：
294
知识点 1、wiki词库处理 繁体字转为简体字 2、对简体语料库进行jieba分词 3、word2vec建模 4、加载模型，预测 ...
分类：
其他好文 时间：
2019-06-11 12:42:31
阅读次数：
103
DFA简介DFA全称为：DeterministicFiniteAutomaton,即确定有穷自动机。（自己百度吧）直接代码：敏感词实体类packagecom.nopsmile.dfa;publicclassKeywords{privateStringpid;privateStringContent;publicKeywords(){}publicKeywords(Stringcontent){su
分类：
编程语言 时间：
2019-05-09 12:10:23
阅读次数：
94
它在哪里呢？ 非常重要！ [hadoop@HadoopMaster custom]$ pwd/home/hadoop/app/elasticsearch 2.4.3/plugins/ik/config/custom[hadoop@HadoopMaster c ...
分类：
其他好文 时间：
2019-04-15 18:10:12
阅读次数：
180
一、jieba 库简介 (1) jieba 库的分词原理是利用一个中文词库，将待分词的内容与分词词库进行比对，通过图结构和动态规划方法找到最大概率的词组；除此之外，jieba 库还提供了增加自定义中文单词的功能。 (2) jieba 库支持3种分词模式： 精确模式：将句子最精确地切开，适合文本分析。 ...
分类：
其他好文 时间：
2019-04-15 00:42:17
阅读次数：
248
一、jieba库与wordcloud库的使用 1.jieba库与wordcloud库的介绍 jieba 库的分词原理是利用一个中文词库，将待分词的内容与分词词库进行比对，通过图结构和动态规划方法找到最大概率的词组；除此之外，jieba 库还提供了增加自定义中文单词的功能。 wordcloud是优秀的 ...
分类：
其他好文 时间：
2019-04-04 00:04:50
阅读次数：
376
jieba库的使用: (1) jieba库是一款优秀的 Python 第三方中文分词库，jieba 支持三种分词模式：精确模式、全模式和搜索引擎模式，下面是三种模式的特点。 精确模式：试图将语句最精确的切分，不存在冗余数据，适合做文本分析 全模式：将语句中所有可能是词的词语都切分出来，速度很快，但是 ...
分类：
其他好文 时间：
2019-04-04 00:03:40
阅读次数：
221
