简单概括：Hadoop是由Apache组织使用Java语言开发的一款应对大数据存储和计算的分布式开源框架。 Hadoop的起源 2003-2004年，Google公布了部分GFS和MapReduce思想的细节，受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制 ...
分类：
其他好文 时间：
2019-09-15 10:32:13
阅读次数：
141
HBase HBas是Hadoop数据库，是一个分布式，可扩展的大数据存储。 当您需要对大数据进行随机，实时读/写访问时，请使用HBase。该项目的目标是托管非常大的表 - 数十亿行X百万列 - 在商品硬件集群上。HBase是一个开源的，分布式的，版本化的非关系数据库，结构化数据分布式存储系统。正如 ...
分类：
其他好文 时间：
2019-09-13 15:26:51
阅读次数：
91
随着企业数据的日久累计，企业生产的数据无论从数量空间还是从维度层次上都日益繁杂。面对大量数据，管理层常常望洋兴叹：要么企业自产的大量数据不能有效利用，无法提供决策依据；要么数据展示模式繁杂晦涩，无法快速甄别有效信息。如何将海量数据经过抽取、加工、提炼，通过可视化方式展示出来，改变传统的文字描述识别模式，让决策者更高效的掌握重要信息和了解重要细节，这关系到企业重大决策的制定和发展方向的研判。数据可视
分类：
其他好文 时间：
2019-08-21 13:36:41
阅读次数：
103
概述 目前大数据存储有两种方案可供选择：行存储（Row-Based）和列存储（Column-Based）。业界对两种存储方案有很多争持，集中焦点是:谁能够更有效地处理海量数据，且兼顾安全、可靠、完整性。从目前发展情况看，关系数据库已经不适应这种巨大的存储量和计算要求，基本是淘汰出局。在已知的几种大数... ...
分类：
其他好文 时间：
2019-08-07 17:39:20
阅读次数：
143
一、前言 动态查找树主要包括：二叉查找树，平衡二叉树，红黑树，B树，B-树，查找的时间复杂度就为O(log2N)，通过对数就可以发现降低树的深度就会提高查找效率。在大数据存储过程，大量的数据会存储到外存磁盘，外存磁盘中读取与写入某数据的时候，首先定位到磁盘中的某一块，这就有个问题：如何才能有效的查找 ...
分类：
其他好文 时间：
2019-08-04 19:27:50
阅读次数：
142
IT行业的工作方向：云计算--大数据运维Linux操作系统（Windows--桌面工程师）|||Linux运维虚拟化KVM\XENHadoop+JAVA=大数据存储方向（web架构）||（搭建自己的个人网站）openstack---------------------------------------------------------||||||||||docker(k8s)HDFSmrHiv
分类：
其他好文 时间：
2019-07-31 11:10:15
阅读次数：
72
一、IT知识构架 云计算 大数据 （一）云计算 大数据 1、运维 | Linux操作系统（Windows--桌面工程师） | | |Linux运维 虚拟化KVM\XEN Hadoop + JAVA =大数据存储方向 （web架构） | | （搭建自己的个人网站） openstack | | | | ...
分类：
其他好文 时间：
2019-07-30 21:27:23
阅读次数：
105
TiDB在特来电的探索 一、 为什么研究TiDB 特来电大数据平台通过开源与自研相结合的方式,目前已经上线多套集群满足不同的业务需求.目前在大数据存储和计算方面主要使用了Hbase、Elasticsearch、Druid、Spark、Flink.大数据技术可谓是百花齐放,百花齐放 百家争鸣,不同的技 ...
分类：
数据库 时间：
2019-06-23 23:03:59
阅读次数：
272
随着IT互联网信息技术的飞速发展和进步。目前大数据行业也越来越火爆，从而导致国内大数据人才也极度缺乏，下面介绍一下关于Hadoop环境中管理大数据存储技巧。在现如今，随着IT互联网信息技术的飞速发展和进步。目前大数据行业也越来越火爆，从而导致国内大数据人才也极度缺乏，下面介绍一下关于Hadoop环境中管理大数据存储技巧。1、分布式存储传统化集中式存储存在已有一段时间。但大数据并非真的适合集中式存储
分类：
其他好文 时间：
2019-06-15 12:02:30
阅读次数：
97
原文地址：http://www.cnblogs.com/5211314jackrose/p/8413402.html 一、免费大数据存储库的网站 1、深度学习数据集收集网站 http://deeplearning.net/datasets/** 收集大量的各深度学习相关的数据集，但并不是所有开源的数 ...
分类：
其他好文 时间：
2019-05-18 00:19:41
阅读次数：
2827
