elasticseach的数据分片shard，在创建索引之后，在生命周期内就不可改变了，所以在索引开始创建的时候，要根据预估的数据规模合理的设置shard数目。在集群中让shard分布均匀，可以有效的均衡集群负载，所以我们要尽量保证shard的在集群中分布均匀。...
分类：
其他好文 时间：
2015-04-10 20:16:04
阅读次数：
209
1、 开机自动启动Redis 1)，拷贝redis目录utils下的redis_init_script文件到/etc/init.d，并将其重命名为redisd，再运行chmod u+x redisd 2)，修改redis根目录下的redis.conf，将daemonize修改为yes，将pidfile，...
分类：
其他好文 时间：
2015-04-10 11:46:05
阅读次数：
197
最近做日志分析，发现logstash较符合自己的需求，Logstash:做系统log收集，转载的工具。同时集成各类日志插件,对日志查询和分析的效率有很大的帮助。一般使用shipper作为log收集、indexer作为log转载。Logstashshipper收集log并将log转发给redis存储Logstashindexer从redis中读..
分类：
其他好文 时间：
2015-04-09 17:52:55
阅读次数：
524
优化时机一般单表超过500万左右，或明显感觉到性能下降时，需要优化优化方案
读写分离
使用缓存，如memcached或Redis
使用搜索引擎，如ElasticSearch或solr
分库分表
详细说明
读写分离很容易实现，建议在一开始做，不必等到性能下降时
发现性能下降时可做。比如有一张500万大表，不可能缓存全表，只能缓存热点数据，所以需要有一个监控热点数据的功能
像缓存整个大表或者数据量很大可...
分类：
数据库 时间：
2015-04-09 08:59:05
阅读次数：
119
inner_hits文档：http://www.elastic.co/guide/en/elasticsearch/reference/current/search-request-inner-hits.html#parent-child-inner-hits
（ElasticSearch 1.50+ 可用）
在使用搜索“has-child”搜索父文档时，一般情况只...
分类：
其他好文 时间：
2015-04-08 13:09:53
阅读次数：
2298
1、安装就不说了，下载就能用 2、遇到一个查询词的出现频率问题，先直接贴代码: ?? ???? client = fatory.client(); ?? ??? ?TermVectorRequestBuilder requestBuilder =null; ?? ??? ?TermVec...
分类：
其他好文 时间：
2015-04-08 11:15:26
阅读次数：
137
ElasticSearch是一个强大的搜索服务器，基于Apache
Lucene的全文搜索引擎开发，具有高性能、分布式和零配置的优点。在当前的项目中，我们希望ES能承担亿级文档的搜索，而ES也证明了即便面对这样的数据规模，也能实现十分迅速的搜索响应。
概念
节点（Node）：节点是一个ES的实例，一般一台主机上部署一个节点-集群（Cluster）：集群由若干节点组成，和任意节点...
分类：
其他好文 时间：
2015-04-06 21:56:28
阅读次数：
208
To have launchd start elasticsearch at login: ? ? ln -sfv /usr/local/opt/elasticsearch/*.plist ~/Library/LaunchAgents Then to load elasticsearch now: ? ? launchctl load ~/Library/LaunchAgents/...
分类：
其他好文 时间：
2015-04-06 15:50:55
阅读次数：
110
最近改进了项目中的站内搜索的功能，增加了全文索引，提升了搜索速度。因为项目框架是django，所以采用django+haystack+pyelasticsearch+elasticsearch的方式实现。django作为Web framework，采用MVC设计模式，非常易于开发数据库驱动的网站。h...
分类：
其他好文 时间：
2015-04-06 12:46:32
阅读次数：
187
今天在ES上做了一个聚合,先过滤一个嵌套对象,再对另一个域做聚合,但是过滤似乎没有起作用{ "size":0, "filter":{ "nested":{ "path":"nna_risks", "filter":{ ...
分类：
其他好文 时间：
2015-04-04 12:05:13
阅读次数：
293
