如果仅仅是海量的结构性数据，那么解决的办法就比较的单一，用户通过购买更多的存储设备，提高存储设备的效率等解决此类问题。然而，当人们发现数据库中的数据可以分为三种类型：结构性数据、非结构性数据以及半结构性数据等复杂情况时，问题似乎就没有那么简单了。大数据汹涌来袭当类型复杂的数据汹涌袭来，那么对于用户IT系统的冲击又会是另外一种处理方式。很多业内专家和第三方调查机构通过一些市场调查数据发现，大数据时代
分类：
其他好文 时间：
2020-08-10 18:34:46
阅读次数：
69
前言 天津神舟通用数据技术有限公司（简称“神舟通用公司”），隶属于中国航天科技集团（CASC）。是国内从事数据库、大数据解决方案和数据挖掘分析产品研发的专业公司。公司获得了国家核高基科技重大专项重点支持，是核高基专项的牵头承担单位。自1993年在航天科技集团开展数据库研发以来，神通数据库已历经27年 ...
分类：
数据库 时间：
2020-06-28 09:49:15
阅读次数：
90
声明：本文档所有内容均在本人的学习和理解上整理，仅供参考，欢迎讨论。不具有权威性，甚至不具有精确性，也会在以后的学习中对不合理之处进行修改。 在上一篇“浅谈Hadoop inFusionInsight—华为大数据解决方案的理解”中，我重点提到了大数据的两个相较于传统数据所不同的特点——数量大和种类多 ...
分类：
其他好文 时间：
2019-08-04 01:40:32
阅读次数：
209
大数据的发展历程总体上可以划分为三个重要阶段，萌芽期、成熟期和大规模应用期，20世纪90年至21世纪初，为萌芽期，随着，一批商业智能工具和知识管理技术的开始和应用，度过了数据萌芽，21世纪前十年则为成熟期，主要标志为，大数据解决方案逐渐走向成熟，形成了并行计算与分布式系统两大核心技，谷歌的GFS和MapReduce等大数据技术受到追捧，Hadoop平台开始大行期道，2010年以后，为大规模应用期，
分类：
其他好文 时间：
2019-08-01 11:50:38
阅读次数：
132
学习大数据分析与应用课程的首要任务，是先了解统计与建模方法和数据挖掘方法所呈现出来的效果，然后依次学习Excel数据处理及编程、MySQL数据库的简单操作及Hadoop的基础知识。从而为进阶、提高打好基础。基础统计与建模方法演示探索性数据分析演示常用概率分布和渐进性演示置信区间和假设检验演示线性回归模型演示广义线性回归模型演示数据挖掘方法演示分类预测基本流程演示数据预处理演示分类方法演示聚类分析演
分类：
其他好文 时间：
2019-07-20 17:15:41
阅读次数：
121
引言 对于一个大型的互联网应用，海量数据的存储和访问成为了系统设计的瓶颈问题，对于系统的稳定性和扩展性造成了极大的问题。通过数据切分来提高网站性能，横向扩展数据层已经成为架构研发人员首选的方式。 ?水平切分数据库：可以降低单台机器的负载，同时最大限度的降低了宕机造成的损失； ?负载均衡策略：可以降低 ...
分类：
数据库 时间：
2019-05-31 19:50:51
阅读次数：
172
大快搜索自荣获“2018中国大数据企业50强”殊荣，12月20日在由工信部指导，中国电子信息产业化发展研究院主办的2018中国软件大会上，大快搜索获评“2018中国大数据基础软件领域领军企业”称号，入选中国数字化转型TOP100服务商，《城市数据运河》获评优秀政务大数据解决方案。图：工业和信息化部信息化和软件服务业司司长在会上致辞图：大快搜索获评“2018中国大数据基础软件领域领军企业”在本届20
分类：
其他好文 时间：
2018-12-24 11:17:46
阅读次数：
143
1.概述 Spark起源于加州大学伯克利分校RAD实验室,起初旨在解决MapReduce在迭代计算和交互计算中的效率低下问题.目前Spark已经发展成集离线计算,交互式计算,流计算,图计算,机器学习等模块于一体的通用大数据解决方案. 2.Spark组件 Spark Core Spark Core 实 ...
分类：
其他好文 时间：
2018-11-21 10:22:35
阅读次数：
271
大数据项目由业务驱动，一套完整且优秀的大数据解决方案对企业的发展具有战略性意义。 由于数据来源多样，导致来自不同数据源的数据类型、规模等具有不同的特征。在处理分析大数据时，将涉及到更多维度（治理、安全等）。 因此在采用大数据分析前，需对项目的整个管理流程和决策框架提前考虑。需要考虑到的内容主要有： ...
分类：
其他好文 时间：
2018-10-26 22:15:22
阅读次数：
247
Factom是一家致力于利用区块链技术来进行文件认证、数据管理、档案记录的保存与验证的公司，可应用于资信证明、专利保护、身份证明、产权保护、医疗档案、审计等领域。 Factom的名字来源于拉丁文，意思是“事情的陈述和确定”。Factom提供了可进行各种应用程序的开发的API接口，包括审计系统、医疗信 ...
分类：
其他好文 时间：
2018-10-16 15:52:30
阅读次数：
188
