银行大数据类项目测试的重要性在于业务数据可靠性、可用性等验证,因为数据本身是一把双刃剑,它能给企业带来业务价值的但是也是最大风险来源。不可靠的数据质量意味着糟糕的业务经营,将导致错误的数据统计分析、监管业务难、误导高层领导决策等问题
分类:
其他好文 时间:
2018-03-06 17:03:17
阅读次数:
165
计算机和网络技术的高速发展对存储性能和数据可靠性的要求不断提高。在企业环境中,当公司服务器同时有3000+的用户同时访问时,并且用户同时进行不同的文件读写的操作时,单个硬盘的读写性能有限,容易出现性能瓶颈。常见的并行接口硬盘中如早期的IDE硬盘最高只到达133Mbps,SCSI小型计算机系统接口硬盘的最高传输速率是320Mbps,目前主流的串行接口硬盘SATA接口硬盘中SATA1传输速率是300M
分类:
系统相关 时间:
2018-03-05 11:16:29
阅读次数:
220
一、数据的加密方式 数据加密有三种方式: 1、对称加密(算法有:DES、AES、3DES、)加密和解密使用同一个密钥 2、非对称加密(RSA、DSA、ELGamal等等)一共四把钥匙,用公钥加密数据,只能使用与之配对的私钥解密;反之亦然 3、单项加密(md5 sha1 sha2 sha128 sha ...
分类:
其他好文 时间:
2018-03-01 00:49:01
阅读次数:
322
计算机网络组成: 硬件 软件 目的:实现资源共享、信息传递。 计算机网络功能: 数据通信、资源共享、增加数据可靠性、提高系统处理能力 网络协议与标准协议:一组控制数据通信的规则标准:一致同意的规则可以理解为标准 ISO(国际标准化组织)在网络通信中创建了OSI(开放系统互连)模型。国际标准
分类:
其他好文 时间:
2018-01-28 23:25:00
阅读次数:
306
RAID全称为独立磁盘冗余阵列(Rdeundant Array of Independent Disks),基本思想就是把 多个相对便宜的硬盘组合起来,成为一个硬盘阵列组,使性能达到甚至超过一个价格昂贵、 容量巨大的硬盘。RAID通常被用在服务器电脑上,使用完全相同的硬盘组成一个逻辑扇区, 因此操作系统只会把它当做一个硬盘。
RAID分为不同的等级,各个不同的等级均在数据可靠性及读写性能上做了不同的权衡。 在实际应用中,可以依据自己的实际需求选择不同的RAID方案。
分类:
其他好文 时间:
2018-01-15 18:47:31
阅读次数:
162
核心知识点: 存储性能优化无非从磁盘类型、数据结构以及存储备份方式来进行,根据业务场景选择最合适的方案。 1.机械vsSSD(磁盘类型) a.机械:由于每次访问数据,都需要移动磁头臂,因此连续访问和随机访问性能差别比较大。快速顺序读写、慢速随机读写 b.SSD:使用硅晶体存储数据,因此像内存一样随机 ...
分类:
其他好文 时间:
2018-01-06 21:00:10
阅读次数:
137
一、概述 为了提升集群的HA,Kafka从0.8版本开始引入了副本(Replica)机制,增加副本机制后,每个副本可以有多个副本,针对每个分区,都会从副本集(Assigned Replica,AR)中,选取一个副本作为Leader副本,所有读写请求都由Leader副本处理,其余的副本被称为Follw ...
分类:
其他好文 时间:
2018-01-01 18:21:11
阅读次数:
202
分享2017年上海QCon《携程第四代架构之软负载SLB实践之路》、《恒生中间件如何助理证券经纪业务发展》和《Heron的Exactly-Once实现》(消息exactly-once语义实现)的总结 ...
分类:
其他好文 时间:
2017-11-06 11:07:00
阅读次数:
117
Kafka起初是由LinkedIn公司开发的一个分布式的消息系统,后成为Apache的一部分,它使用Scala编写,以可水平扩展和高吞吐率而被广泛使用。目前越来越多的开源分布式处理系统如Cloudera、Apache Storm、Spark等都支持与Kafka集成。 1 概述 Kafka与传统消息系 ...
分类:
其他好文 时间:
2017-06-09 23:35:14
阅读次数:
316
网络层上有IP、ICMP、IGMP等协议。 1、IP地址 在OSI模型中,三层网络层负责IP地址,IP数据报帧头中的源地址和目的地址就是指IP地址。IPV4类型IP地址为32位4个字节,IPV6类型IP地址为128位16个字节,公网IP是全球唯一的。32位的IPV4 IP地址通常用4个十进制的整数来 ...
分类:
其他好文 时间:
2017-05-25 10:08:08
阅读次数:
249