首先我先介绍一下魅族大数据上云的背景,即我们为什么要上云?
在开始之前我们默认今天参与直播的各位同学对Hadoop相关技术和docker都有一定的了解,另外以下提到Hadoop是泛指目前魅族大数据使用的Hadoop生态圈技术,资源除特别说明则泛指存储资源、计算资源和网络资源的总和。...
分类:
其他好文 时间:
2016-05-18 18:35:41
阅读次数:
243
刘哇勇的部落格要说jQuery 最成功的地方,我认为是它的可扩展性吸引了众多开发者为其开发插件,从而建立起了一个生态系统。这好比大公司们争相做平台一样,得平台者得天下。苹果,微软,谷歌等巨头,都有各自的平台及生态圈。 刘哇勇的部落格要说jQuery 最成功的地方,我认为是它的可扩展性吸引了众多开发者 ...
分类:
Web程序 时间:
2016-05-13 23:12:41
阅读次数:
338
学习React断断续续地也有两三周了,期间接触到了一大堆名词和工具,不得不承认React生态圈实在是太繁荣了,作为还没毕业的学生,本应该沉下心来多看看基础课程、刷一刷面试题好在秋招找一份不错的工作,但是一想到还有那么多好玩的框架没有学过,好用的工具没有用过,就心里直痒痒~ 刚刚解决了困扰了我好一段时 ...
分类:
Web程序 时间:
2016-05-13 09:09:54
阅读次数:
317
反向O2O、文娱IP创业以及生态圈体系化发展,这是2016互联网创业的三大趋势,也是寻找流量变现路径的有效方向。...
分类:
其他好文 时间:
2016-05-13 03:02:42
阅读次数:
177
说明
在Hadoop中执行的任务有时候需要把多个Map/Reduce作业连接到一起,这样才能够达到目的。在Hadoop生态圈中,Oozie它让我们可以把多个Map/Reduce作业组合到一个逻辑工作单元中,从而完成更大型的任务。
原理
Oozie是一种Java Web应用程序,它运行在Java servlet容器——即Tomcat——中,并使用数据库来存储以下内容:
工作流定义
当前运行...
分类:
其他好文 时间:
2016-05-12 12:26:41
阅读次数:
177
概要
为了调查hadoop生态圈里的制品,特地的了解了一下RDBMS和hdfs之间数据的导入和导出工具,并且调查了一些其他同类的产品,得出来的结论是:都是基于sqoop做的二次开发或者说是webUI包装,实质还是用的sqoop。比如pentaho的PDI,Oracle的ODI,都是基于此,另外,Hortnetwork公司的sandbox,Hue公司的Hue webUI,coulder的coul...
分类:
数据库 时间:
2016-05-12 12:04:30
阅读次数:
364
2016财年交易额、营收分别突破3万亿、1000亿大关,不仅代表阿里进步神速,也成为中国商业史上一个里程碑式事件。这一亮丽成绩的背后,均指向阿里引以为傲的电商生态系统,这也是其核心竞争力所在,让其他电商玩家望尘莫及。 在这个言必谈“生态”的时代,从来不缺生态鼓吹者,而是最缺生态践行者。我认为生态最重 ...
分类:
其他好文 时间:
2016-05-09 15:38:09
阅读次数:
146
Spark支持很多输入和输入源,同时还支持内建RDD。Spark本身是基于Hadoop的生态圈,它可以通过
Hadoop MapReduce所使用的InpoutFormat和OutputFormat接口访问数据。而且大部分的文件格式和存储系统
(HDFS,Hbase,S3等)都支持这种接口。Spark常见的数据源如下:
(1) 文件格式和文件系统,也就是我们经常用的TXT,JSON,CSV等...
分类:
其他好文 时间:
2016-05-07 11:28:59
阅读次数:
492
每次当我想用 node.js 来写一个 web 相关项目的时候,我总是会陷入无比的纠结,原因是 JavaScript 生态圈里的模板引擎实在太多了,但那么多却实在找不出一个接近完美的,所谓完美的概念就是功能丰富,书写简单,前后端可共用等一些属性。虽然可以在 Template
Chooser 按功能进行挑选,但挑选的结果再用来对比还是各有各的问题。所以干脆就一些模板引擎进行稍微深入的分析,希望通...
分类:
Web程序 时间:
2016-04-17 23:01:01
阅读次数:
264
Junit单元测试框架简单介绍 JUnit是一个Java语言的单元测试框架。它由Kent Beck和Erich Gamma建立,逐渐成为源于Kent Beck的sUnit的xUnit家族中最为成功的一个。 JUnit有它自己的JUnit扩展生态圈。多数Java的开发环境都已经集成了JUnit作为单元 ...
分类:
其他好文 时间:
2016-04-17 00:43:29
阅读次数:
146