今天我们实现一个简单的分词器，仅仅做演示使用功能如下：
1、分词按照空格、横杠、点号进行拆分；
2、实现hi与hello的同义词查询功能；
3、实现hi与hello同义词的高亮显示；
MyAnalyzer实现代码：
public class MyAnalyzer extends Analyzer {
private int analyzerType;
public MyAna...
分类：
Web程序 时间：
2015-01-28 11:14:12
阅读次数：
172
微信语义理解接口称为智能接口，但微信只是开了一半接口，剩下一半要求用户自己去对接业务。这个语义理解类似中文分词技术，优于模糊匹配，拿查股票为例，你说“东风汽车”，“东风汽车股票”，“东风汽车价格”，“查一查东风汽车当前价”返回的内容是一样的，因此语义理解和微信语音识别的配合是最好的，由于口语化，识别率问题，智能接口就有一定用武之地。查询的参数包括query（语音识别结果），city（股票不影响），...
分类：
微信 时间：
2015-01-26 22:44:14
阅读次数：
472
aileLiu造句：每个星期我要向产品经理索要一周的工作计划。（150125）Every week I asked product manager for a week's work plan.【ask后面加ed，是它的完成时分词形式和被动态形式，例如我昨天问过他这样一个问题，里面的ask就要用完成...
分类：
其他好文 时间：
2015-01-25 18:15:28
阅读次数：
157
针对solr的分词器比较多，其中最常用的的两个是mmseg4j和ik-analyzer,至于他们的区别可以网上查找比较下，这两个分词器都挺好用。我搭建的solr环境（上一篇）是4.10.3的最新版本，以下将详细说下mmseg4j的配置。
1.首先下载对应的jar包。
版本号一定要对应上否则可能会报错，下载地址为：http://code.google.com/p/mmseg4j/ 但是这个网址好...
分类：
其他好文 时间：
2015-01-25 11:12:29
阅读次数：
172
注:Elasticsearch版本：1.4.2一、安装与配置1.从https://github.com/medcl/elasticsearch-analysis-ik下载elasticsearch-analysis-ik-master.zip2.解压elasticsearch-analysis-ik...
分类：
其他好文 时间：
2015-01-23 19:40:16
阅读次数：
16588
IKAnalyzer1.3.4要自定义我们自己的词库，而且我们可以随时新增分词，网上查了一圈没有相关资料，看来只有自己搞定了。观察了下IKAnalyzer分词器的配置文件IKAnalyzer.cfg.xml发现其中有这样一个选项：
，而且作者做了注释说这个就是扩展远程词典的。于是打开IKAnalyzer的源码查看，最后在Dictronary这类下找到这个方法：getRemoteWords。经过查...
分类：
其他好文 时间：
2015-01-23 18:34:17
阅读次数：
232
前提nutch1.2已部署到eclipse中详见：http://www.cnblogs.com/cy163/archive/2013/02/19/2916419.html1 部署IKAnalyzer3.2.81.1 下载IKAnalyzer3.2.81.2 将IKAnalyzer3.2.8复制到nu...
分类：
系统相关 时间：
2015-01-22 21:43:38
阅读次数：
304
redis-search4j是一款基于redis的搜索组件。特点1.基于redis，性能高效2.实时更新索引3.支持Suggest前缀、拼音查找(AutoComplete功能)4.支持单个或多个分词搜索5.可根据字段进行结果排序环境1.jdk 1.6+2.redis 2.2+依赖包1.Jedis-2...
分类：
其他好文 时间：
2015-01-22 17:01:07
阅读次数：
973
1、下载IKAnalyzer2012FF_hf1.zip解压如下图：注解（IKAnalyzer2012才能支持solr4.0以上的版本）下载地址：http://pan.baidu.com/s/1c0nMOhE2、添加IKAnalyzer2012FF中文分词：把IKAnalyzer2012_FF文件夹IKAnalyzer2012_FF.jar放在tomcat1.6，webapps\solr\WEB-INF\lib的目录下..
分类：
其他好文 时间：
2015-01-21 20:25:33
阅读次数：
233
集成IKAnalyzer，简化了中文分词（详见下载包内的开发手册）。终身免费使用，能开发：大型手机App服务端系统 大型功能性网站开发（如：电子商务网站、社区、门户等） 大数据系统应用开发（与vertica无缝集成） 应用解决方案，如电子政务系统、管理系统、协作系统、企业ERP/DRP/MRP等...
分类：
Web程序 时间：
2015-01-21 10:15:08
阅读次数：
272
