<span style="font-family: Arial, Helvetica, sans-serif; background-color: rgb(255, 255, 255);"><span style="white-space:pre"> </span>这是一个很easy的《经典飞机大战 ...
分类:
其他好文 时间:
2017-04-17 19:55:58
阅读次数:
225
CDH中hbase和zookeeper挂掉,主因还是zookeeper挂掉,然后依赖于zookeeper的hbase也挂掉,根据提示得知的zookeeper的连接数超限,默认60个连接,改为600就好了 由于kafka,storm两个集群是独立于CDH的,但是他们又都使用了CDH中的zookeepe ...
分类:
其他好文 时间:
2017-04-17 14:38:30
阅读次数:
139
1.flume是分布式的日志收集系统,把收集来的数据传送到目的地去。2.flume里面有个核心概念,叫做agent。agent是一个java进程,运行在日志收集节点。通过agent接收日志,然后暂存起来,再发送到目的地。3.agent里面包含3个核心组件:source、channel、sink。 3 ...
分类:
Web程序 时间:
2017-04-10 13:08:21
阅读次数:
178
一、使用hadoop发行版CDH5.9.0 开启HBase 1.2.0 开启HDFS 2.6.0 开启ZooKeeper 二、使用Storm 0.0.1-incubating 该版本没有external模块 三、使用kafka_2.10-0.9.0.1 (2.1.0表示编译kafka所使用的scal ...
分类:
其他好文 时间:
2017-04-07 20:27:32
阅读次数:
183
1、清晰的可探索的目标: a、定义对搜索引擎内数据的清洗转入规则 b、定义搜索引擎内数据的元数据描述规格 c、实现个人画像基本信息查询、个人画像事实信息查询 d、支持用户群查询(标签的组合条件查询):基于元数据的sql? e、支持用户动态标签的加入和元数据注册:单独建立es的type存储 2、不是很 ...
分类:
其他好文 时间:
2017-03-29 18:50:45
阅读次数:
142
1、配置文件配置文件控制着一个PostgreSQL服务器实例的基本行为,主要包含postgresql.conf、pg_hba.conf、pg_ident.conf(1)postgresql.conf该文件包含一些通用设置,比如内存分配,新建database的默认存储位置,PostgreSQL服务器的IP地址,日志的位置以及许多其他设置。9.4版..
分类:
数据库 时间:
2017-03-26 23:00:57
阅读次数:
286
1. 什么是设计模式 设计模式(Design pattern)是一套被反复使用、多数人知晓的、经过分类编目的、代码设计经验的总结。使用设计模式是为了可重用代码、让代码更容易被他人理解、保证代码可靠性。毫无疑问,设计模式于己于他人于系统都是多赢的;设计模式使代码编制真正工程化;设计模式是软件工程的基石 ...
分类:
其他好文 时间:
2017-03-24 23:16:03
阅读次数:
423
转自:https://www.ustack.com/blog/ceph-internal-scrub/ Ceph 的主要一大特点是强一致性,这里主要指端到端的一致性。众所周知,传统存储路径上从应用层到内核的文件系统、通用块层、SCSI层到最后的HBA和磁盘控制器,每层都有发生错误的可能性,因此传统的 ...
分类:
其他好文 时间:
2017-03-24 12:20:00
阅读次数:
252
设置 Hadoop 来扩展磁盘 I/O 现代服务器通常有多个磁盘硬件来提供大存储能力。这些磁盘通常配置成 RAID 阵列,作为它们的出厂设置。这在很多情况下是有益的,但对 Hadoop 却不是。 Hadoop 的 slave 节点存储了 HDFS 数据块和 MapReduce 临时文件在它的本地磁盘 ...
分类:
其他好文 时间:
2017-03-17 23:30:06
阅读次数:
209