码迷,mamicode.com
首页 >  
搜索关键字:大数据 sqoop 数据处理    ( 17411个结果
转:openTSDB 2.0 安装
OpenTSDB-2.0.0安装布署2014-02-27 11:07:49|分类:大数据|标签:hadoop|举报|字号订阅1、介绍OpenTSDB是一个架构在Hbase系统之上的实时监控信息收集和展示平台。它支持秒级数据采集所有metrics,支持永久存储,可以做容量规划,并很容易的接入到现有的报...
分类:数据库   时间:2014-07-07 08:00:49    阅读次数:780
大数据时代——你是否希望“被遗忘”
互联网上产生的越来越多的个人数据,究竟应该如何处理?这一问题最近在欧洲得到了初步的解答。今年5月13日,欧洲最高法院裁定,普通公民的个人隐私拥有“被遗忘权”。是什么样的压力,让大家迫切的希望被遗忘,大数据带给我们的究竟是足够的便捷,还是过度的关注带来巨大的压力,都已然成为人们不断争议的话题。如今人....
分类:其他好文   时间:2014-07-06 19:13:53    阅读次数:144
SAS学习笔记
一、 在SAS中进行随机抽样:1、 在实际数据处理中常常需要进行样本抽样,在实践中主要有两种情况:(1)简单无重复抽样(2)分层抽样 a.等比例分层抽样b. 不等比例分层抽样;2、SAS 中可以利用PROC suveryselect 过程实现各种抽样:其一般形式是: PROC SURVEYSELE....
分类:其他好文   时间:2014-07-06 19:07:23    阅读次数:373
JSON解析 实现界面 数据分离.
JSON作为一种轻量级的数据交换格式,正在逐步取代XML,成为网络数据的通用格式基于JavaScript的一个子集易读性略差,编码手写难度大,数据量小JSON格式取代了XML给网络传输带来了很大的便利,但是却没有了XML的一目了然,尤其是JSON数据很长的时候,我们会陷入繁琐复杂的数据节点查找中JS...
分类:Web程序   时间:2014-07-06 18:09:56    阅读次数:201
sqoop安装部署(笔记)
sqoop是一个把关系型数据库数据抽向hadoop的工具。同时,也支持将hive、pig等查询的结果导入关系型数据库中存储。由于,笔者部署的hadoop版本是2.2.0,所以sqoop的版本是:sqoop-1.99.3-bin-hadoop2001、下载sqoop wget http://mirro...
分类:其他好文   时间:2014-07-06 15:37:41    阅读次数:138
CSDN专访:大数据时代下的商业存储
我的CSDN专访。 摘要:EMC公司作为全球信息存储及管理产品方面的领先公司,不久前,EMC宣布收购DSSD加强和巩固了其在行业内的领导地位,日前我们有幸采访到EMC中国的张安站,他就大数据、商业存储、Spark等给大家分享了自己的看法。...
分类:其他好文   时间:2014-07-06 12:03:25    阅读次数:225
POJ2139 Six Degrees of Cowvin Bacon [Floyd]
水题,随手敲过 一看就是最短路问题,a,b演同一场电影则他们的距离为1 默认所有两两原始距离无穷,到自身为0 输入所有数据处理后floyd 然后照它说的求平均分离度 再找最小的,×100取整输出 #include #include #include using namespace std; int cownum,filmnum; int film[11111][333]; int...
分类:其他好文   时间:2014-07-06 10:52:47    阅读次数:203
CSDN开源夏令营 百度数据可视化实践 前言
CSDN开源夏令营 百度数据可视化实践 前言...
分类:其他好文   时间:2014-07-06 10:41:11    阅读次数:279
分布式系统设计系列 -- 概要
在现在的“大数据”、“云平台”这些前沿技术的背景下,衍生了很多平台型技术点,Nosql、Hadoop、Storm等层出不穷。这些华丽的技术后面其实处处都离不开“分布式”这个虽然提出了很久,但是大数据、云计算带火了的技术。以致于开个玩笑说,如果不懂一些“分布式"下的技术和原理的,会有点不好意思说自己是后端开发 -- (玩笑而已!! ^_^)。...
分类:其他好文   时间:2014-07-04 08:44:53    阅读次数:216
hue3.5.0使用初探(cdh版本)
之前一直用phpHiveAdmin,也一直在关注hue,最近打算调研一下hue,hue在最近两年发展很快,页面效果和功能上都有很大程度的提升,所支持的服务也越来越多,除了hive,hbase,目前还支持sqoop,impala,pig等。hue的一个大致架构如下图所示核心服务是HueServer,在本地使用SQLLite作..
分类:其他好文   时间:2014-07-04 06:16:59    阅读次数:469
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!