码迷,mamicode.com
首页 > 其他好文 > 详细

大数据概述

时间:2018-03-06 23:26:38      阅读:401      评论:0      收藏:0      [点我收藏+]

标签:必须   价值   限制   服务   dal   概述   动态   用户   样本   

试述大数据对思维方式的重要影响。

 

(1)大数据而不是样本数据

  过去,受数据存储和处理能力的限制,在科学分析中,通常采用抽样的方法,从大数据中抽取一部分样本数据,通过对样本数据的分析,来推断大数据的总体特征。样本数据规模要比大数据小得多,因此,可以在可控的代价内实现数据分析的目的。

  现在迎来大数据时代,大数据技术的核心就是对海量数据的存储与处理,分布式文件系统和分布式数据库技术,提供了理论上近乎无限的数据存储能力。

 

(2)讲究效率而不是精确

  过去,我们在科学分析中采用抽样分析方法,就必须追求分析方法的精确性,因为,抽样分析只是针对部分样本的分析,其分析结果被应用到大数据以后,误差会被放大,这就意味着,抽样分析的微小误差,被放大到大数据以后,可能会变成一个很大的误差。因此,为了保证误差被放大到全集数据时仍然处于可以接受的范围,就必要确保抽样分析结果的精确性。正是由于这个原因,传统的数据分析方法往往更加注重提高算法的精确性,其次才是提高算法效率。

  现在,大数据时代采用全样分析而不是抽样分析,全样分析结果就不存在误差被放大的问题,因此,追求高精确性已经不是其首要目标;相反,大数据时代具有“秒级响应”的特征,要求在几秒内就迅速给出针对海量数据的实时分析结果,否则就会丧失数据的价值,因此,数据分析的效率成为关注的核心。

 

(3)强调相关性而不是旧的因果性

  过去,数据分析的目的,一方面是解释事物背后的发展机理,比如,一个大型超市在某个地区的连锁店在某个时期内净利润下降很多,这就需要IT部门对相关销售数据进行详细分析找出发生问题的原因;另一方面是用于预测未来可能发生的事件,比如,通过实时分析微博数据,当发现人们对雾霾的讨论明显增加时,就可以建议销售部门增加口罩的进货量,因为,人们关注雾霾的一个直接结果是,大家会想到购买一个口罩来保护自己的身体健康。不管是哪个目的,其实都反映了一种“因果关系”。

  现在的大数据时代,因果关系不再那么重要,人们转而追求“相关性”而非“因果性”。

 

大数据、云计算、物联网之间的区别与联系

 

大数据:指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。

云计算:是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。

物联网:是新一代信息技术的重要组成部分,也是“信息化”时代的重要发展阶段。顾名思义,物联网就是物物相连的互联网。这有两层意思:其一,物联网的核心和基础仍然是互联网,是在互联网基础上的延伸和扩展的网络;其二,其用户端延伸和扩展到了任何物品与物品之间,进行信息交换和通信,也就是物物相息。

 

物联网和云计算之间的联系

  云计算相当于人的大脑,是物联网的神经中枢。云计算是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。

 

大数据与云计算的联系

  大数据与云计算的关系是密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对大量的数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。

 

大数据、云计算和物联网的联系

  物联网对应了互联网的感觉和运动神经系统。云计算是互联网的核心硬件层和核心软件层的集合,也是互联网中枢神经系统萌芽。大数据代表了互联网的信息层,是互联网智慧和意识产生的基础。包括物联网,传统互联网,移动互联网在源源不断的向互联网大数据层汇聚数据和接受数据。云计算与物联网则推动了大数据的发展。

 

3.简述你对大数据应用与发展的看法,以及你在这次大数据浪潮中想扮演什么角色。

 

(1)对大数据应用与发展的看法

 

1)应用: 十九大钦点“推动大数据和实体经济深度融合”,加之BAT三位dalao均有大数据产品技术分享图片技术分享图片

技术分享图片

拥有“大数据”必定是各互联网公司甚至是其他行业公司的“平均水平” 

                        

(2)这次大数据浪潮中想扮演的角色

 

  1)我肯定是一个大数据的贡献者

 

  2)我肯定是一个大数据的使用者

 

  3)我想要成为一个受益者,通过大数据的云计算数据,判断未来发展趋势,及时对自身作出调整适应发展趋势

 

大数据概述

标签:必须   价值   限制   服务   dal   概述   动态   用户   样本   

原文地址:https://www.cnblogs.com/FZW1874402927/p/8519406.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!