hadoop是什么？ 是一个分布式基础架构，主要解决海量数据存储以及数据分析计算问题。 hadoop三大发行版本？ Apache、clourdera、Hortonworks hadoop优势？ 高可靠、高扩展、高效、高容错 hadoop1.x和2.x的区别？ HDFS（hadoop distribu ...
分类：
其他好文 时间：
2020-01-30 14:29:07
阅读次数：
79
今天读一本书读到inode结构的时候忽然明白了一件事情。就是既然可以用双间接、三间接，没道理最大到三间接啊。这种结构理论上一定是可以无限扩展下去的。 这不就形成了一种无限拓展的结构了吗？ 你可能会问。这期间假如有一个区块宕机了。整个链条不就接不上了么。 但是你想啊。假如它是一个分布式结构呢。本身就具 ...
分类：
其他好文 时间：
2020-01-26 13:03:19
阅读次数：
103
HDFS产出背景及定义 Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodity hardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDF ...
分类：
其他好文 时间：
2020-01-15 21:18:15
阅读次数：
85
1 Hbase特点 容量大：Hbase单表可以有百亿行、百万列,数据矩阵横向和纵向两个纬度所支持的数据量级都非常具有弹性。 面向列 ：Hbase是面向列的存储和权限控制,并支持独立检索。列式存储,其数据在表中是按照某列存储的,这样在查询只需要少数几个字段的时候,能大大减少读取的数据量。 多版本： H ...
分类：
其他好文 时间：
2020-01-15 19:57:46
阅读次数：
78
编译 WIN: javac -encoding UTF-8 -Djava.ext.dirs=$JAVA_HOME/jre/lib/ext;/app/lib -d . ./Hdfstest.java linux: javac -encoding UTF-8 -Djava.ext.dirs=$JAVA_ ...
分类：
编程语言 时间：
2020-01-07 16:11:33
阅读次数：
89
分布式存储的应用场景相对于其存储接口，现在流行分为三种: 对象存储: 也就是通常意义的键值存储，其接口就是简单的GET、PUT、DEL和其他扩展，如七牛、又拍、Swift、S3 块存储: 这种接口通常以QEMU Driver或者Kernel Module的方式存在，这种接口需要实现Linux的Blo ...
分类：
其他好文 时间：
2020-01-04 14:09:04
阅读次数：
87
服务器和客户端的概念 hdfs的客户端有多种形式 ...
分类：
其他好文 时间：
2020-01-01 09:51:09
阅读次数：
62
大数据概述 大数据的特点 存储单位概述 大数据在现实生活中的具体应用 大数据公司组织结构 全部作品 Hadoop ...
分类：
其他好文 时间：
2020-01-01 09:28:11
阅读次数：
115
Spark Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。Spark是UC Berkeley AMP lab (加州大学伯克利分校的AMP实验室)所开源的类Hadoop MapReduce的通用并行框架，Spark，拥有Hadoop MapReduce所具有的优点；但不同 ...
分类：
其他好文 时间：
2019-12-27 00:11:15
阅读次数：
106
4.1概述 1. HBase是一个高可靠、高性能、面向列、可伸缩的分布式数据库，是谷歌BigTable的开源实现，主要用来存储非结构化和半结构化松散数据。 2. HBase与传统数据库的区别 数据类型上的区别，它把数据存储为未经解释的字符串 数据操作，没有像关系型数据库那样的复杂数据操作，通常采用单 ...
分类：
数据库 时间：
2019-12-23 00:30:13
阅读次数：
151
