HDFS HA Namenode HA 详解 hadoop2.x 之后,Clouera 提出了 QJM/Qurom Journal Manager,这是一个基于 Paxos 算法(分布式一致性算法)实现的 HDFS HA 方案,它给出了一种较好的解决思路和方案,QJM 主要优势如下: 不需要配置额外 ...
分类:
其他好文 时间:
2018-07-13 21:08:06
阅读次数:
221
1、持久化存储docker容器中一般不保存数据,只封装系统和环境,这样就存在一个问题,一个docker容器的数据内容不能持久化,且不能共享出来,在生产中,不能很好地提供服务。为了解决这个问题,就要涉及到docker的持久化存储和共享存储的技术了。所谓持久化,就是将真实机目录挂载到容器中,让容器运行时所产生的数据都写入到真实机的目录中,以此来提供持久存储。mkdir/var/webrootdocke
分类:
其他好文 时间:
2018-06-30 16:23:45
阅读次数:
276
存储卷存储卷的映射:dockerrun-d-p物理机端口:容器服务进程端口-v物理机文件夹:容器文件夹容器名/标签(注:容器文件夹映射前不存在,执行完命令会自动创建;如果映射前,执行完命令会覆盖原文件夹的内容)例:dockerrun-d-v/var/webroot:/var/www/htmlmyos:httpd共享存储共享存储基本概念?一台共享存储服务器可以提供给所有Docker主机使用?共享存储
分类:
其他好文 时间:
2018-06-30 12:55:13
阅读次数:
231
一、redis简介 (一)什么是redis 1.redis是一个开源的使用ANSI C语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value 内存数据库。2.特点:读写性能强悍 支持丰富的数据结构 可持久化存储 一个把数据存储在内存中的高速缓存3.作者是antirez from Ita ...
分类:
其他好文 时间:
2018-06-29 12:11:19
阅读次数:
157
1.序列化与Writable接口 1.1.hadoop的序列化格式 序列化和反序列化就是结构化对象和字节流之间的转换,主要用在内部进程的通讯和持久化存储方面 hadoop在节点间的内部通讯使用的是RPC,RPC协议把消息翻译成二进制字节流发送到远程节点,远程节点再通过反序 列化把二进制流转成原始的信 ...
分类:
其他好文 时间:
2018-06-29 11:11:27
阅读次数:
134
导读:Storm是一个分布式计算框架,主要使用Clojure与Java语言编写,最初是由NathanMarz带领Backtype公司团队创建,在Backtype公司被Twitter公司收购后进行开源。最初的版本是在2011年9月17日发行,版本号0.5.0。2013年9月,Apache基金会开始接管并孵化Storm项目。ApacheStorm是在EclipsePublicLicense下进行开发的
分类:
其他好文 时间:
2018-06-28 22:52:25
阅读次数:
219
·外壳shell:User Interface(用户界面)、Browser engine(浏览器引擎)、Networking(网络)、UI Backend(UI 后端)、Date Persistence(数据持久化存储) 1.相互工作: 用户界面 -包括地址栏、后退/前进按钮、书签目录等,也就是你- ...
分类:
其他好文 时间:
2018-06-26 20:43:18
阅读次数:
156
磁盘如何正常使用,要经过如下的演变 存储 从个人电脑到互联网时代的数据存储是如何演进的,原理是怎样的,了解了这些,有利于程序员更好的优化性能,系统架构,本文意在讨论这个话题。 一般情况下的电脑,主要存储设备是内存和硬盘,内存是带电存储,硬盘是持久化存储,内存的访问速度比硬盘快。应用软件或者信息化项目 ...
分类:
系统相关 时间:
2018-06-25 18:57:22
阅读次数:
243
IndexedDB是一种可以让你在用户的浏览器内持久化存储数据的方法,为web应用提供了丰富的查询功能,使我们的应用在在线和离线都能正常工作。 由于 IndexedDB 本身的规范还在持续演进中,当前的 IndexedDB 的实现还是使用浏览器前缀。在规范更加稳定之前,浏览器厂商对于标准 Index ...
分类:
数据库 时间:
2018-06-22 13:14:07
阅读次数:
284
1、ActiveMQ消息持久化方式 文件 MySQL数据库 oracle数据 LevelDB方式 2、如何修改持久化存储方式 文件持久化 ActiveMQ默认的消息保存方式,一般如果没有修改过其他持久化方式的话可以不用修改配置文件。 可在\conf\activemq.xml配置,找到<persist ...
分类:
其他好文 时间:
2018-06-21 11:30:08
阅读次数:
166