摘要在高并发环境下，大量的读、写请求涌向数据库，此时磁盘IO将成为瓶颈，从而导致过高的响应延迟，因此缓存应运而生。无论是单机缓存还是分布式缓存都有其适应场景和优缺点，当今存在的缓存产品也是数不胜数，最常见的有redis和memcached等，既然是分布式，那么他们是怎么实..
分类：
系统相关 时间：
2016-05-26 11:43:06
阅读次数：
220
摘要 在高并发环境下，大量的读、写请求涌向数据库，此时磁盘IO将成为瓶颈，从而导致过高的响应延迟，因此缓存应运而生。无论是单机缓存还是分布式缓存都有其适应场景和优缺点，当今存在的缓存产品也是数不胜数，最常见的有redis和memcached等，既然是分布式，那么他们是怎么实现分布式的呢？本文主要介绍 ...
分类：
系统相关 时间：
2016-05-24 13:31:44
阅读次数：
200
1．分片 分片是什么？分片就是将数据存储在多个机器上。当数据集超过单台服务器的容量，服务器的内存，磁盘IO都会有问题，即超过单台服务器的性能瓶颈。此时有两种解决方案，垂直扩展和水平扩展（分片）。 垂直扩展就是增加CPU，增加容量，但高性能系统的CPU和容量不成比例，这样扩展成本大，并且有上限。 水平 ...
分类：
数据库 时间：
2016-05-23 14:47:07
阅读次数：
235
FIO是测试IOPS的非常好的工具，用来对硬件进行压力测试和验证，支持13种不同的I/O引擎，包括:sync,mmap, libaio, posixaio, SG v3, splice, null, network, syslet, guasi, solarisaio 等等。 安装 下载地址 wge ...
分类：
其他好文 时间：
2016-05-21 21:34:31
阅读次数：
214
要么不做，要做就做最好，严谨。1，性能测试指标，综合衡量系统性能。用于描述系统性能状况，性能测试的结果TPS、并发用户数、响应时间、业务处理能力（每秒业务量）、硬件指标（CPU、内存、磁盘IO）2，性能相关的配置，提前了解会影响系统性能的配置运行内存大孝内存大孝CPU3..
分类：
其他好文 时间：
2016-05-20 14:46:00
阅读次数：
183
IO中的几种形式 基于字节：InputStream、OutputStream 基于字符：Writer、Reader 基于磁盘:File 基于网络Socket 最终都是字节操作，字符到字节要编码转换。耗时，容易乱码 1，磁盘IO 磁盘设置，应用程序只能系统调用，要内核空间和用户空间切换， 标准访问文件 ...
分类：
编程语言 时间：
2016-05-19 23:26:58
阅读次数：
286
调优概述
大多数Spark作业的性能主要就是消耗在了shuffle环节，因为该环节包含了大量的磁盘IO、序列化、网络数据传输等操作。因此，如果要让作业的性能更上一层楼，就有必要对shuffle过程进行调优。但是也必须提醒大家的是，影响一个Spark作业性能的因素，主要还是代码开发、资源参数以及数据倾斜，shuffle调优只能在整个Spark的性能调优中占到一小部分而已。因此大家务必把握住调优的基...
分类：
其他好文 时间：
2016-05-18 18:59:14
阅读次数：
148
虽然上一章节介绍的二叉搜索树在查询指定值时表现很好，但是当查询两个值之间的多个节点时，就会遇到很大的问题。因为需要遍历整个树的节点，并检查每个节点是否在指定的区间内。而且遍历整颗树是随机磁盘IO(译者注：随机IO会导致频繁的磁头换道，所以相比顺序IO来说非常耗时)，所以我们需要找到一种更有效做范围查询的方法。为了解决这个难题，现代数据库修正了之前介绍的二叉搜索树，我们称修正后的数据结构为B+Tree...
分类：
数据库 时间：
2016-05-13 02:58:23
阅读次数：
224
memcached分布式实现原理 2016-05-09 Float_Luuu 架构师 架构师（JiaGouX）我们都是架构师！ 摘要 在高并发环境下，大量的读、写请求涌向数据库，此时磁盘IO将成为瓶颈，从而导致过高的响应延迟，因此缓存应运而生。无论是单机缓存还是分布式缓存都有其适应场景和优缺点，当今 ...
分类：
系统相关 时间：
2016-05-10 09:56:49
阅读次数：
238
