云计算应用——虚拟桌面Virtual Desktop Infrastructure是一种基于服务器的计算模型，VDI概念最早由VMware提出，目前已经成为标准的技术术语。使用虚拟桌面可以在数据中心对资源进行统一管理，同时保证用户获得完整PC的使用体验。目前延迟是影响其发展的最大问题。图 虚拟桌面示...
分类：
其他好文 时间：
2015-07-23 21:21:06
阅读次数：
132
Table of Contents
Hive-On-Tez测试
MRR计算模型测试MPJ计算模型测试
Hive-On-Tez测试
在MRR和MPJ计算模型的处理上，TEZ能够提升的性能较为明显，具体测试如下：
MRR计算模型测试
测试表格
1.users(id,name,password): 数据总量1千万条...
分类：
其他好文 时间：
2015-07-21 06:49:46
阅读次数：
393
2.2分析算法分析算法的结果意味着预测算法需要的资源。虽然有时候关心内存、通讯或者计算机硬件，但是通常我们想度量的是时间。在分析算法之前，要有一个实现技术的模型，包括描述所用资源及其代价的模型。我们假定一种通用的单处理器计算模型—随机访问机（random-access machine，RAM）来作为...
分类：
编程语言 时间：
2015-07-17 13:35:57
阅读次数：
133
Mapreduce初析 Mapreduce是一个计算框架，既然是做计算的框架，那么表现形式就是有个输入（input），mapreduce操作这个输入（input），通过本身定义好的计算模型，得到一个输出（output），这个输出就是我们所需要的结果。 我们要学习的就是这个计算模型的运行规则。在...
分类：
其他好文 时间：
2015-07-14 15:09:19
阅读次数：
184
大数据数据处理模型：1.Google的MapReduce是一个简单通用和自动容错的批处理计算模型。但，不适合交互式和流式计算！2.Storm3.Impala4.GraphLab5.SparkSpark: 伯克利大学提出， RDD概念（一种新的抽象的弹性数据集），MapReduce的一种扩展。RDD本...
分类：
其他好文 时间：
2015-07-13 13:50:04
阅读次数：
103
首先还是要声明一下，这个文章是我在入职阿里云1个月以来，对于分布式计算的一点肤浅的认识，可能有些地方不够妥善，还请看官可以指出不足的地方，共同进步。
背景
随着互联网的发展，数据量的增大，很多对于数据的处理工作（例如一些推荐系统、广告推送等）都迁移到了云端，也就是分布式计算系统上。衍生了很多牛逼的分布式计算的计算模型，比较著名的就是MapReduce、MPI、BSP等。后来也产生了一些分布式计...
分类：
其他好文 时间：
2015-07-13 10:18:08
阅读次数：
507
主要分享了Coursera 机器学习相关课程材料，包括练习题与我的Matlab解答。 课程涉及技术：梯度下降、线性回归、监督/非监督学习、分类/逻辑回归、正则化、神经网络、梯度检验/数值计算、模型选择/诊断、学习曲线、评估度量、SVM、K-Means聚类、PCA、Map Reduce & Data ...
分类：
系统相关 时间：
2015-07-11 06:41:10
阅读次数：
442
前段时间有人问我，什么是云计算；当时用自己的一些见解及平时积累的一些概念进行了讲解，但是，自我感觉没有讲的很透彻。今天特地查找了一些相关资料，总结如下：云计算的概念：刘鹏教授对云计算的作了长短两种定义。长定义是：“云计算是一种商业计算模型。它将计算任务分布..
分类：
其他好文 时间：
2015-06-30 13:11:23
阅读次数：
156
什么是MapReduce？你想数出一摞牌中有多少张黑桃。直观方式是一张一张检查并且数出有多少张是黑桃。
MapReduce方法则是：
1. 给在座的所有玩家中分配这摞牌。
2. 让每个玩家数自己手中的牌有几张是黑桃，然后把这个数目汇报给你。
3. 你把所有玩家告诉你的数字加起来，得到最后的结论。MapReduce概述MapReduce是一种分布式计算模型，由Google提出，主要用于搜索领域...
原文摘要：深度学习可以让那些拥有多个处理层的计算模型来学习具有多层次抽象的数据的表示。这些方法在许多方面都带来了显著的改善，包括最先进的语音识别、视觉对象识别、对象检测和许多其它领域，例如药物发现和基因组学等。深度学习能够发现大数据中的复杂结构。它是利用BP算法来完成这个发现过程的。BP算法能够指导机器如何从前一层获取误差而改变本层的内部参数，这些内部参数可以用于计算表示。深度卷积网络在处理图像、...
分类：
其他好文 时间：
2015-06-04 12:04:45
阅读次数：
373
