一、Hbase 简介 hdfs 是分布式文件系统, 只支持在文件层面的增、删除、改（需要把文件下载下来，改完，再上传上去）、查 hbase 是支持海量数据存储的NoSql数据库，基于hdfs的，支持数据的增、删、改、查，支持随机写数据（改指定的某一条数据） hbase 查询数据只能根据rowkey进 ...
分类：
其他好文 时间：
2020-01-30 19:24:15
阅读次数：
78
hadoop是什么？ 是一个分布式基础架构，主要解决海量数据存储以及数据分析计算问题。 hadoop三大发行版本？ Apache、clourdera、Hortonworks hadoop优势？ 高可靠、高扩展、高效、高容错 hadoop1.x和2.x的区别？ HDFS（hadoop distribu ...
分类：
其他好文 时间：
2020-01-30 14:29:07
阅读次数：
79
一、FastDFS介绍 简介 FastDFS是一个开源的高性能分布式文件系统（DFS）。它的主要功能包括：文件存储，文件同步和文件访问，以及高容量和负载平衡。主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size <500MB）为载体的在线服务。 FastDFS系统 ...
分类：
其他好文 时间：
2020-01-28 20:45:05
阅读次数：
101
Google三驾马车如何解决海量数据存储与计算问题。
分类：
其他好文 时间：
2019-12-31 23:53:25
阅读次数：
92
随着大数据、云计算、物联网等新技术的发展，电信、互联网、政企等行业应用日新月异，数据呈爆炸式增长并成为战略性资源。全球数据量每年约30%的速度递增，2020年达到惊人的40ZB。面对海量数据，传统存储面临诸多挑战，主要体现在以下方面。成本高：传统存储硬件使用专有设备，通用性差，设备投资加上后期维护、升级扩容的成本非常高。性能低：单节点I/O性能瓶颈无法逾越，容量和性能都不易扩展，难以支撑海量数据的
分类：
其他好文 时间：
2019-12-31 00:56:35
阅读次数：
82
hbase简介 hbase定义 hbase是一种分布式、可扩展、支持海量数据存储的NoSql数据库，可以对几十亿条数据进行秒级查询。 hbase数据模型 逻辑上，hbase的数据模型和关系型数据库比较类似，数据存在一张表中，有行有列。但是从hbase的底层物理存储逻辑来看，hbase更像是一个 ，因 ...
分类：
数据库 时间：
2019-12-28 09:21:24
阅读次数：
139
大数据是对海量数据存储、计算、统计、分析等一系列处理手段，处理的数据量是TB级，甚至是PB或EB级的数据，是传统数据处理手段无法完成的，大数据涉及分布式计算、高并发处理、高可用处理、集群、实时性计算等等，汇集的是IT最热门、最流行的IT技术，大数据是机器学习、深度学习、AI等尖端可以领域的基础架构。 ...
分类：
其他好文 时间：
2019-11-03 12:27:52
阅读次数：
101
hive与hbase的联系与区别：共同点：1.hbase与hive都是架构在hadoop之上的。都是用hadoop作为底层存储。 他们的底层是要通过mapreduce分布式计算的，hbase、hive、pig底层都是这样的。但整体来说hadoop还是比较快的，因为它是进行海量数据存储和分布式计算，这 ...
分类：
其他好文 时间：
2019-10-10 22:26:21
阅读次数：
132
一种分布式、可扩展、支持海量数据存储的 NoSQL 数据库。 逻辑上，HBase 的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。但从 HBase 的底层物理存储结构（K-V）来看，HBase 更像是一个 multi-dimensional map。 一、HBase 逻辑结构 二、HB ...
分类：
其他好文 时间：
2019-10-06 13:23:12
阅读次数：
88
一、Hbase能做什么？1. 海量数据存储：上百亿行 x 上百万列并没有列的限制当表非常大的时候才能发挥这个作用， 最多百万行的话，没有必要放入hbase中2. 准实时查询：百亿行 x 百万列，在百毫秒以内二、Hbase在实际场景中的应用：1. 交通方面：船舶GPS信息，全长江的船舶GPS信息，每天 ...
分类：
其他好文 时间：
2019-09-13 15:40:51
阅读次数：
147
