前言：目前自己在做使用Lucene.net和PanGu分词实现全文检索的工作，不过自己是把别人做好的项目进行迁移。因为项目整体要迁移到ASP.NET Core 2.0版本,而Lucene使用的版本是3.6.0 ，PanGu分词也是对应Lucene3.6.0版本的。不过好在Lucene.net 已经有 ...
分类：
Web程序 时间：
2018-02-08 15:37:54
阅读次数：
304
jieba分词用法 sorted函数按key值对字典排序 先来基本介绍一下sorted函数，sorted(iterable,key,reverse)，sorted一共有iterable,key,reverse这三个参数。 其中iterable表示可以迭代的对象，例如可以是dict.items()、d ...
分类：
其他好文 时间：
2017-12-14 22:54:10
阅读次数：
919
1 import jieba 2 with open('lagoujobdatails.txt',encoding='utf-8') as f: 3 tmp_line=f.read() 4 jieba_cut=jieba.cut(tmp_line) 5 ans=' '.join(jieba_cut)... ...
分类：
其他好文 时间：
2017-12-06 16:15:15
阅读次数：
144
jieba介绍： 一、支持三种分词模式： 精确模式，试图将句子最精确地切开，适合文本分析； 全模式，把句子中所有的可以成词的词语都扫描出来, 速度非常快，但是不能解决歧义； 搜索引擎模式，在精确模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词。 二、jieba自带了一个叫做dict.t ...
分类：
其他好文 时间：
2017-12-03 21:53:45
阅读次数：
442
简介 支持分词模式Search模式，用于对用户查询词分词Index模式，用于对索引文档分词特性支持多种分词模式全角统一转成半角用户词典功能conf 目录有整理的搜狗细胞词库因为性能原因，最新的快照版本去除词性标注，也希望有更好的 Pull Request 可以提供该功能。 简单使用 获取jieba- ...
分类：
编程语言 时间：
2017-11-07 16:26:25
阅读次数：
316
最近在学习处理自然语言处理，就发现LTP的（哈工大语言云），这个比我最先使用的jieba分词更好，词库更大，功能也更强大。 这里介绍两种方法：1、调用LTP的API，2、使用pyltp，这里的方法基于python，对于其它语言的使用的请大家了解这里：LTP 3.3文档 1、调用LTP的API ①进入 ...
分类：
编程语言 时间：
2017-10-13 13:55:33
阅读次数：
359
http://www.cnblogs.com/zhbzz2007/p/6084196.html http://blog.csdn.net/u010454729/article/details/40476483 使用方法 ...
分类：
其他好文 时间：
2017-10-06 18:06:29
阅读次数：
95
接上一章，抓取京东评论区内容。 url=‘https://club.jd.com/comment/productPageComments.action?callback=fetchJSON_comment98vv399&productId=4560435&score=0&sortType=5&pag ...
分类：
编程语言 时间：
2017-08-07 01:20:09
阅读次数：
350
号称“做最好的Python中文分词组件”的jieba分词是python语言的一个中文分词包。它的特点有： 支持三种分词模式： ? 精确模式，试图将句子最精确地切开，适合文本分析； ? 全模式，把句子中所有的可以成词的词语都扫描出来, 速度非常快，但是不能解决歧义； ? 搜索引擎模式，在精确模式的基础 ...
分类：
其他好文 时间：
2017-07-05 22:04:56
阅读次数：
2998
python结巴(jieba)分词 一、特点 1、支持三种分词模式： (1)精确模式：试图将句子最精确的切开，适合文本分析。 (2)全模式：把句子中所有可以成词的词语都扫描出来，速度非常快，但是不能解决歧义。 (3)搜索引擎模式：在精确模式的基础上，对长词再次切分，提高召回率，适合用于搜索引擎分词。 ...
分类：
编程语言 时间：
2017-06-26 18:01:25
阅读次数：
255
