注：此文首发于 《程序员》杂志 2008 年 7 月刊。 从 Shard 到 Sharding “Shard” 这个词英文的意思是”碎片”，而作为数据库相关的技术用语，似乎最早见于大型多人在线角色扮演游戏(MMORPG)中。”Sharding” 姑...
分类：
数据库 时间：
2015-08-20 19:17:56
阅读次数：
339
2.1.1什么是数据切分"Shard" 这个词英文的意思是"碎片"，而作为数据库相关的技术用语，似乎最早见于大型多人在线角色扮演游戏中。"Sharding" 姑且称之为"分片"。Sharding 不是一门新技术，而是一个相对简朴的软件理念。众所周知，MySQL 5 之后才有了数据表分区功能，那么在此...
分类：
数据库 时间：
2015-08-16 21:19:37
阅读次数：
231
package hash;import hash.Shard.Node;import java.nio.ByteBuffer;import java.nio.ByteOrder;import java.util.ArrayList;import java.util.Iterator;import j...
分类：
编程语言 时间：
2015-08-06 15:00:23
阅读次数：
167
默认是64MB，取值范围是1 MB 到 1024 MB.那修改会造成什么？下表简单总结：chunk size 调节splitting次数(碎片数)数据跨shard数目数据均匀网络传输次数migration次数单词migration 传输量查询速度变大减少变少不太均匀变少变少变大变快变小增多变多更均匀变多变多变小变慢在数据量很大的情况下，考虑网络带宽，如果发现带宽占满，可以考虑调小chunk siz...
分类：
数据库 时间：
2015-07-19 23:42:11
阅读次数：
337
主要是两种，一种是用数值进行范围划分，一种是hash，有点类似于memcached集群机制。下表对比了优缺点sharding算法范围查询性能数据分布ranged based强, 容易集中在一个shard上的多个chunks不均匀, 影响scale outhash based一般，需要查询多个shard才能获得结果均匀MongoDB还提供了可以自定义算法的机制，叫做tag aware shardin...
分类：
数据库 时间：
2015-07-19 20:14:34
阅读次数：
312
sharding 指数据分片cluster 集群，一个集群包含了多个shards，每个shard都由一个replica set组成collection DB中的表的概念，只不过没有schema每个collection在sharding的场景下都分成了多个chunks，chunk大小可以设置chunk 如果超过设定大小，会被拆分成两个，splitting就是负责这个工作的后台进程。migrate指c...
分类：
数据库 时间：
2015-07-19 20:12:44
阅读次数：
242
网上大部分都是的mongo2.x集群分片了，咱写个3.04的。
由于公司采用磁盘阵列冗余存储，所以不考虑数据备份问题只是简单的分片存储数据进行测试的。
配置结构如图：
服务器配置：
cpu双核、8G内存、/shard目录挂载500G硬盘。
服务器列表：
IP
职能
192.168.6.117
config、m...
分类：
数据库 时间：
2015-07-07 19:37:03
阅读次数：
270
概述 shard 分片 就是 把不同的数据分在不同的服务器 模型其中：
用户对mongodb的操作都是向mongs请求的
configsvr 用于保存，某条数据保存在哪个shard的上
如何使用分片先启动2个节点作为shardmongd --dbpath ~/db/mongo1/databse --logpath ~/db/mongo1/log/mongo.log --...
分类：
数据库 时间：
2015-07-03 06:56:19
阅读次数：
212
想边自己写ruby代码，边部署随时能够到处查看，heroku域名又不友好，速度在国内又慢。于是乎想起来capistrano,于是学起 ...capistrano 一点入门认知https://www.evernote.com/shard/s6/sh/72a2b7c8-d531-4efc-9e16-ac...
Solr4.0版本后引入了solrcloud，用于扩展Solr的索引与搜索能力，同时提高Solr的容错能力与高可用。
在SolrCloud中，有几个比较重要的知识点：SolrCloud中collection、shard、core、node相关概念；SolrCould路由策略；创建Collection；和如何进行数据迁移。
通过学习研究，总结SolrCloud学习中的心得，较为详细地介绍了上述几个知识点。...
分类：
其他好文 时间：
2015-06-29 10:17:30
阅读次数：
180
