1.试述大数据对思维方式的重要影响。 答: 大数据时代最大的转变思维是有以下三中转变:全样而非抽样、效率高而非精确、相关而非因果。第一,全样而非抽样。大数据技术的核心就是海量数据的存储和处理,分布式文件系统和分布式数据库技术提供了理论上几乎无限的数据存储能力,分布式并行编程框架MapReduce提供 ...
分类:
其他好文 时间:
2018-03-06 20:25:38
阅读次数:
173
MongoDB是一种文件型数据库,对数据格式没有硬性要求,所以可以实现灵活多变的数据存储和读取。MongoDB又是一种分布式数据库,与传统关系数据库不同的是,分布式数据库不支持table-join,所以在设计数据库表结构方面与关系数据库有很大的不同。分布式数据库有一套与传统观念不同的数据模式,在设计 ...
分类:
数据库 时间:
2018-03-06 13:42:58
阅读次数:
261
多机数据库的实现 一、复制 slaveof 主服务器ip地址。形成主从关系。 1、同步 从向主服务器发送sync命令。 主服务器收到sync命令执行bgsave,生成rdb文件,缓冲区同时记录从现在开始执行的所有命令。 主服务器执行完毕bgsave命令,会将rdb文件发送给从服务器,从服务器接收并载 ...
分类:
数据库 时间:
2018-03-03 00:37:20
阅读次数:
166
MongoDB是一种文本式数据库。与传统的关系式数据库最大不同是MongoDB没有标准的格式要求,即没有schema,合适高效处理当今由互联网+商业产生的多元多态数据。MongoDB也是一种分布式数据库,充分具备大数据处理能力和高可用性。MongoDB提供了scala终端驱动mongo-scala- ...
分类:
数据库 时间:
2018-02-28 17:28:58
阅读次数:
216
由于分布式系统所涉及到的领域众多,知识庞杂,很多新人在最初往往找不到头绪,不知道从何处下手来一步步学习分布式架构。 本文试图通过一个最简单的、常用的分布式系统,来阐述分布式系统中的一些基本问题。 负载均衡 分布式缓存 分布式文件系统/CDN 分布式RPC 分布式数据库/Nosql 分布式消息中间件 ...
分类:
其他好文 时间:
2018-02-24 19:35:12
阅读次数:
199
1 mysql分布式数据库,如 mycat https://www.cnblogs.com/zzsdream/articles/6650690.html 2 读写分离,mysql主从复制+mysql proxy http://www.cnblogs.com/phpstudy2015-6/p/6687 ...
分类:
数据库 时间:
2018-02-24 10:44:12
阅读次数:
198
一、区块链的本质 区块链是什么?一句话,它是一种特殊的分布式数据库。 首先,区块链的主要作用是储存信息。任何需要保存的信息,都可以写入区块链,也可以从里面读取,所以它是数据库。 其次,任何人都可以架设服务器,加入区块链网络,成为一个节点。区块链的世界里面,没有中心节点,每个节点都是平等的,都保存着整 ...
分类:
其他好文 时间:
2018-02-24 00:50:21
阅读次数:
174
rsyslog特性:CentOS6和71,多线程2,支持UDP,TCP,SSL,TLS,RELP?MySQL,PGSQL,3,Oracle实现日志存储4,强大的过滤器,可实现过滤记录日志信息中任意部分5,自定义输出格式6,ELK:elasticsearch,logstash,kibana7,非关系型分布式数据库8,基于apache软件基金会jakarta项目组的项目lucene9,Elastics
分类:
其他好文 时间:
2018-02-22 19:53:12
阅读次数:
242
一、什么是MyCat? MyCat是一个开源的分布式数据库系统,是一个实现了MySQL协议的服务器,前端用户可以把它看作是一个数据库代理,用MySQL客户端工具和命令行访问,而其后端可以用MySQL原生协议与多个MySQL服务器通信,也可以用JDBC协议与大多数主流数据库服务器通信,其核心功能是分表分库,即将一个大表水平分割为N个小表,存储在后端MySQL服务器里或者其他数据库里。MyC
分类:
其他好文 时间:
2018-02-22 10:59:36
阅读次数:
187
现代信息系统应该是避不开大数据处理的。作为一个通用的系统集成工具也必须具备大数据存储和读取能力。cassandra是一种分布式的数据库,具备了分布式数据库高可用性(high-availability)特性,对于一个实时大型分布式集成系统来说是核心支柱。与传统的关系数据库对比,cassandra从数据 ...
分类:
数据库 时间:
2018-02-22 10:51:24
阅读次数:
245