using System;using System.Collections;using System.IO;using System.Text.RegularExpressions;/// /// 分词辅助类/// public class SegList{ public int MaxLength...
分类：
其他好文 时间：
2014-10-22 17:42:35
阅读次数：
260
1、当指定 pangu.xml 配置文件不在 bin 中（在 bin 中每次会被重新覆盖），在类库读取 字典文件夹 时，会清空 PanGu.Init(fileName) 而使用默认配置。 如果不重写类库，是无法指定配置文件位置的（也就是无法配置盘古分词的多元分词等功能，会被默认配置覆盖）。2、启用....
分类：
其他好文 时间：
2014-10-21 19:14:12
阅读次数：
283
============问题描述============ 最近的安卓开发中需要用到中文分词，就用了中科院的这个分词系统，但是按java应用程序方法引入API中的文件（DATA，ICTCLAS，Configure）等程序总会报错，请问有人在安卓平台上用过吗？麻烦告诉我该如何引用，如果有别的分词系统使用...
分类：
移动开发 时间：
2014-10-20 22:37:37
阅读次数：
236
酒店评论情感分析系统（三）——将分词和去停用词后的评论文本基于“环境、卫生、价格、服务”分类思想：将进行了中文分词和去停用词之后得到的词或短语按序存在一个数组（iniArray）中，从中找出所有和“环境、卫生、价格、服务”四个方面相关的词或短语，并记录下其位置信息（sortRefNum）。然后按照位...
分类：
其他好文 时间：
2014-10-20 20:53:44
阅读次数：
311
本文通过实验阐述了关于全文索引中两种词法分析器的分词效果...
分类：
其他好文 时间：
2014-10-19 19:59:06
阅读次数：
244
167274doc 单字分词全压缩时间real 15m58.464suser 13m52.157ssys 2m3.445s空间tmpfs 12G 1.5G 11G 13% /ape/eqltmpfs-rw-rw-rw-. 1 ape ape 449M 9月 1 12:51 egg.dat-rw-rw...
分类：
其他好文 时间：
2014-10-19 14:15:12
阅读次数：
164
问题WordPress的搜索功能非常简陋，如果用户搜索“日语综合教程第六册”，WordPress会机械地构造一个wp_posts.post_title LIKE '%日语综合教程第六册%'的SQL查询送到数据库里，结果十有八九找不到任何文章。因为我的文章里并没有直接出现这种句子，我一般给“日语综合教...
分类：
其他好文 时间：
2014-10-19 14:11:18
阅读次数：
302
DocFieldProcessor类的任务1 按顺序存储所有的field和对应的fieldinfo2 为当前这篇doc的field按照fieldname来建立hash索引3 调用InvertedDocConsumer类（抽象），对field的内容分词和建立内存索引DocFieldProcessor类...
分类：
其他好文 时间：
2014-10-19 12:47:27
阅读次数：
219
转自：http://www.cnblogs.com/lvpei/archive/2010/08/04/1792409.html中文分词基本算法主要分类基于词典的方法、基于统计的方法、基于规则的方法、（传说中还有基于理解的-神经网络-专家系统，按下不表）1、基于词典的方法（字符串匹配，机械分词方法）定...
分类：
编程语言 时间：
2014-10-18 16:51:52
阅读次数：
273
在本系列的前面一篇文章中, 我们介绍了中文分词. 因为"中文"这门语言主要是"词语"表达的语言, 一个句子中间没有空格停顿, 所以我们在分析处理一段话, 或者一篇文章时, 总是把每一个句中根据最合适的语境拆分成一系列的短语, 其实这个过程就是我们所说的中文分词. 但是在有些语言中我们并不能总是把一句...
分类：
其他好文 时间：
2014-10-18 01:54:01
阅读次数：
250
