基于lucene中的NRT*类实现实时索引：将IndexWrite的相关操作委托给TrackingIndexWriter来处理；开启内存索引重读线程和内存数据commit线程；获取最新可用的IndexSearcher；另类的单例模式实现加载多个索引...
分类：
Web程序 时间：
2015-03-02 13:18:46
阅读次数：
201
介绍Lucene实现实时索引的基本原理，通过几幅简单的图片，介绍了实时索引实现的过程；同时还给出了该系列中的索引的配置类实现...
分类：
Web程序 时间：
2015-02-28 11:27:41
阅读次数：
166
工作流程：
安装coreseek（win32版）建立一个实时索引配置文件根据配置文件开启searchd服务器向mysql数据库实时插入数据启动python客户端访问和搜索
安装coreseek（win32版）
官网下载：http://www.coreseek.cn/products-install/install_on_windows/这里的版本为4.0.1
建立实时索...
分类：
其他好文 时间：
2015-02-18 18:50:44
阅读次数：
231
mysql备份脚本以及删除前5天的备份文件http://www.jb51.net/article/42214.htmmysql备份的三种方式详解http://www.jb51.net/article/41570.htm尝试在某个模块中使用Sphinx实时索引尝试在某个模块中使用HandlerSock...
分类：
其他好文 时间：
2014-10-21 07:48:18
阅读次数：
113
给实时索引添加了merge策略，持续更新时发现有做merge,但索引目录中的段数远远大于RealTimeIndexWriter中的段数,就是有些merge的段应该删除，目录中没有删除。而关闭searcher之后索引目录就变小了，段数也对了。
定位之后发现IndexFileDeleter构造函数中有个checkpoint(segmentInfos,false),false会将第一个commit加入...
分类：
Web程序 时间：
2014-10-18 22:21:46
阅读次数：
255
source mysql{ type = mysql sql_host = 10.10.3.181 sql_user = root sql_pass = dsideal sql_db = ...
分类：
其他好文 时间：
2014-09-10 12:10:10
阅读次数：
283
index rt{ type = rt rt_mem_limit = 512M path = /usr/local/sphinx/data/rt rt_field = title rt_field = content ...
分类：
其他好文 时间：
2014-09-01 15:32:43
阅读次数：
194
我们有了完整索引和增量索引，为什么还需要研究实时索引？1、完整索引每个晚上空闲时执行一次，时间较长，但问题不大，因为IO慢，CPU累，但那个时间段基本没有人使用平台，比如凌晨2点。2、增量索引：目前我们有些需求要求增加的资源要马上在列表中能看到，这里有两个问题，第一个是我们采用的是异步写入数据库队列...
分类：
其他好文 时间：
2014-09-01 08:09:02
阅读次数：
194
上文中介绍了定时器实现实时索引数据的解决方案，本文对其进行补充，介绍数据导入的配置1 配置RequestHandlerdb/db-data-config.xml2 配置数据源和数据实体包括全部导入和增量导入3 引入相关的文件，apache-solr-dataimporthandler-1.4.0.j...
分类：
其他好文 时间：
2014-07-16 19:14:31
阅读次数：
252
twitter对存档的tweet使用lucene做全量索引,新发的推文则是实时索引，实时检索(10秒之内索引)。实时索引和检索系统叫EarlyBird。
感觉写得比较清楚简洁，只要这些信息足够真实可信，完全可以做实现参考。
我简单做了几个记录:
1)基于lucene + java,michael busch是lucene committer
2)词典直接用哈希表，因此不支持term的pr...
分类：
其他好文 时间：
2014-06-08 05:51:59
阅读次数：
482
