简单来说,我们可以把大数据分析工具简单分成两个维度:第一维度:数据存储层——数据报表层——数据分析层——数据展现层第二维度:用户级——部门级——企业级——BI级1、数据存储层数据存储涉及到数据库的概念和数据库语言,这方面不一定要深钻研,但至少要理解数据的存储方式、数据的基本结构和数据类型。SQL查询语言必不可少,精通最好。可从常用的select查询,update修改,delete删除,insert
分类:
其他好文 时间:
2019-07-01 14:17:42
阅读次数:
124
现在很多新闻爆出针孔摄像头 一款能检测联网针孔摄像头的App——DT小听app,免费公益的哦。DT小听App是如何检测出针孔摄像头的?它主要以“移动端APP+云端数据分析中心”相结合的方式,通过移动终端设备(如手机、平板、智能设备)安装App,对无线wifi网络进行一键扫描,再结合云端大数据分析,A ...
分类:
其他好文 时间:
2019-06-29 22:36:00
阅读次数:
142
【导读】数据采集是进行大数据分析的前提也是必要条件,在整个流程中占据重要地位。本文将介绍大数据三种采集形式:系统日志采集法、网络数据采集法以及其他数据采集法。(一)系统日志采集法系统日志是记录系统中硬件、软件和系统问题的信息,同时还可以监视系统中发生的事件。用户可以通过它来检查错误发生的原因,或者寻找受到***时***者留下的痕迹。系统日志包括系统日志、应用程序日志和安全日志。(百度百科)大数据平台或
分类:
其他好文 时间:
2019-06-19 12:02:23
阅读次数:
149
如果单单只有MQTT协议,也许很难支撑起阿里这个IoT大厦。Alink协议的出现,不仅仅是数据从传感端搬到云端,它就如基因图谱,它勾画了一个大厦的骨架,有了它,才有了IoT Studio,才有了大数据分析,才有了后续的一切可能。 ...
分类:
其他好文 时间:
2019-06-17 12:57:44
阅读次数:
130
最近学习了hashtable的一点知识,发现可以用来解决大数据的一些问题。我们这里讲的大数据分析事实上并不是分布式和数据挖掘这些高深的概念,而是针对从从一个大文件或者一堆数据(内存放不下)中找出具有某种特点的数,这也是近年来各大公司经常考的问题。 面试题1:给一个超过100G大小的log file, ...
分类:
其他好文 时间:
2019-05-31 13:27:33
阅读次数:
118
大数据1.算法。“算法”如何与大数据相关?即使算法是一个通用术语,但大数据分析使其在当代更受青睐和流行。2.分析。年末你可能会收到一份来自信用卡公司寄来的包含了全年所有交易记录的年终报表。如果你有兴趣进一步分析自己在食物、衣服、娱乐等方面具体花费占比呢?那你便是在做“分析”了。你正从一堆原始数据中来吸取经验,以帮助自己为来年的消费做出决策。如果你正在针对整个城市人群对Twitter或Faceboo
分类:
其他好文 时间:
2019-05-21 15:56:37
阅读次数:
158
一、大数据分析的五个基本方面1、可视化分析大数据分析的使用者有大数据分析专家,同时还有普通用户,但是他们二者对于大数据分析最基本的要求就是可视化分析,因为可视化分析能够直观的呈现大数据特点,同时能够非常容易被读者所接受,就如同看图说话一样简单明了。2、数据挖掘算法大数据分析的理论核心就是数据挖掘算法,各种数据挖掘的算法基于不同的数据类型和格式才能更加科学的呈现出数据本身具备的特点,也正是因为这些被
分类:
其他好文 时间:
2019-05-19 14:06:08
阅读次数:
199
写在前面 GitDataV,是一个github“大数据可视化平台”,通过它你可以更直观的看到你在github里的一些数据,(之所以打双引号,是因为我觉得这个还没到大数据可视化的程度)。其实我在 上篇文章 分享的时候已经提到了这个想法,通过github提供的接口,做一个自己的“大数据分析页面”,所以我 ...
分类:
其他好文 时间:
2019-05-18 15:54:26
阅读次数:
205
大数据时代,数据的价值越来越被重视,企业从海量大数据中挖掘所需要的信息,用来驱动业务决策以获得更大的商业价值。与此同时,出现了越来越多的大数据技术帮助企业进行大数据分析,例如ApacheHadoop,Hive,Spark,Presto,Drill,以及今天我们即将介绍的ApacheKylin和ApachePhoenix项目等,都是使用SQL语言就可以分析大数据,极大地降低了大数据的使用门槛。这些大
分类:
数据库 时间:
2019-05-17 12:15:44
阅读次数:
216
大数据商业实战演练教学视频资料,从部署到实战全部演练视频帮助你将大数据分析用于实战。 资料获取方式,关注公总号RaoRao1994,查看往期精彩-所有文章,即可获取资源下载链接 更多资源获取,请关注公总号RaoRao1994 ...
分类:
其他好文 时间:
2019-05-14 14:42:48
阅读次数:
104