HDFS小文件问题及解决方案：http://dongxicheng.org/mapreduce/hdfs-small-files-solution/Hadoop升级方案（一）：Hadoop
1.0内部版本升级（初稿）：http://dongxicheng.org/mapreduce-nextgen/...
分类：
其他好文 时间：
2014-05-10 02:08:24
阅读次数：
327
[Architecture Pattern]
Repository实作查询功能范例下载范例程序代码：点此下载问题情景在系统的BLL与DAL之间，加入Repository
Pattern的设计，能够切割BLL与DAL之间的相依性，并且提供系统抽换DAL的能力。但在软件开发的过程中，套用Reposito...
分类：
其他好文 时间：
2014-05-09 19:02:19
阅读次数：
294
最近xcode升级了5.1版本，升级之后程序报关于要适配arm64机器的错。之前对xcode的参数配置，一直不是很了解，但实现先面对问题了，就调查了一下并解决它。一个一个来吧。Architectures这代表，在这个项目里你想要Xcode编译的目标设备列表。Valid
Architectures还不...
分类：
其他好文 时间：
2014-05-09 17:29:01
阅读次数：
237
Memory Architecture-SGA-Database Buffer Cache...
分类：
数据库 时间：
2014-05-07 13:31:15
阅读次数：
439
这里介绍一下hadoop的组成， hadoop主要由两部分组成，，一个是hdfs，另一个是mapreduce
这两个部分在hadoop 2.2.0中分别用start-dfs.sh和start-yarn.sh启动。mapreduce 在2.0版本中有了一个新名字yarn.
dfs 主要用来启动 namenode 和 datanode， namenode既是是传说中的matser, datanod...
分类：
其他好文 时间：
2014-05-07 04:33:35
阅读次数：
359
HDFSEventSink是flume中一个很重要的sink，配置文件中type=hdfs。与此sink相关的类都在org.apache.flume.sink.hdfs包中。
HDFSEventSink算是一个比较复杂的sink，包下涉及的源代码文件数多达13个。。。可配置的参数众多。。。希望...
分类：
其他好文 时间：
2014-05-07 02:06:05
阅读次数：
563
参考书籍： Hadoop in action, 吴超沉思录1.Hbase简介
1.面向列的分布式数据库 2. 以HDFS作为文件系统 3. 利用MapReduce处理Hbase中海量数据 4. ZookKeeper作为协调工具 5.
sqoop提供Hbase到关系型数据库中数据导入功能 ...
分类：
其他好文 时间：
2014-05-07 00:35:59
阅读次数：
424
mapreduce数据本地化（核心特征）、无共享。
1 HDFS的设计
为了存储超大文件 流式访问（一次写入多次读取）商用硬件（不需要超豪华的机器）
2 数据快（block）
磁盘一般是512字节 HDFS默认是64M 但与其他文件系统不同的是小于一个块大小的文件不会占用整个块的空间。块为什么设置这么大？（最小化寻址开销）块抽象带来的好处（一个文件的...
分类：
其他好文 时间：
2014-05-06 23:26:24
阅读次数：
519
1.核心 HDFS 分布式文件系统 主从结构，一个namenoe和多个datanode，
分别对应独立的物理机器
1)NameNode是主服务器，管理文件系统的命名空间和客户端对文件的访问操作。NameNode执行文件系统的命名空间操作，比如打开关闭重命名文件或者目录等，它也负责...
分类：
其他好文 时间：
2014-05-05 10:35:14
阅读次数：
432
当引用了其他工程时，在编译时报错，提示你编译指令架构不对，你需要查看一下这几个工程的Architecture部分是否又冲突，比如主工程设置Valid
Architecture为armv7 而 另一个子工程却设置了build active architecture only 为yes，这时如果你插入了...
分类：
移动开发 时间：
2014-05-04 20:51:04
阅读次数：
2166
