1. MapReduce是一种分布式计算模型，由Google提出，主要用于搜索领域，解决海量数据的计算问题。2. MR由两个阶段组成：Map和Reduce，用户只需要实现map()和reduce()两个函数，即可实现分布式计算，非常简单。这两个函数的形参是key、value对，表示函数的输入信息。 ...
分类：
其他好文 时间：
2017-02-25 01:14:37
阅读次数：
279
分布式系统实践 1. 基于Spark GraphX实现微博二度关系推荐 http://dwz.cn/51OflC 摘要: 基于图的关系挖掘和计算是互联网算法中非常常见的一种计算模型. 比如经典的pagerank, 微博微信的好友推荐等等. 本文从架构和算法两个方面, 非常详细的介绍了微博基于Grap ...
分类：
其他好文 时间：
2017-01-14 13:37:23
阅读次数：
310
大数据运算模型 MapReduce 原理 2016-01-24 杜亦舒 MapReduce 是一个大数据集合的并行运算模型，由google提出，现在流行的hadoop中也使用了MapReduce作为计算模型 MapReduce 通俗解释 图书馆要清点图书数量，有10个书架，管理员为了加快统计速度，找 ...
分类：
其他好文 时间：
2017-01-08 03:55:05
阅读次数：
310
项目估算是项目计划和管理的一个至关重要的方面。 成本超出某个限度可能导致客户取消项目，而过低的成本估算可能会迫使开发小组投入大量的时间却没有相应的经济回报。 常用方法：专家判断方法、算法方法、机器学习方法。 专家判断方法：该方法受到专家经验和主观性等方面的影响； 算法方法：根据某个计算模型来估算项目 ...
分类：
其他好文 时间：
2017-01-06 09:29:00
阅读次数：
166
写在前面 Spark是分布式计算领域中继Hadoop之后，又一个比较流行的框架，最近研究了Spark的基本内容，这里稍微总结下，并与Hadoop进行对比。 什么是Spark? Spark是伯克利大学AMP实验室在09年提出的开源的通用分布式计算框架，使用的也是类似Hadoop的计算模型，但是在设计理 ...
分类：
其他好文 时间：
2017-01-01 16:28:54
阅读次数：
867
个人简介： 测试老鸟，曾做过6年的测试以及2年的大数据开发；曾就职于伟景行、高德（大数据开发）；钟情于钻研开源测试框架；目前挂单于艺龙。 有对本主题感兴趣的同学，可以加我Q私信(305285925)； 在本文内，主要以Android性能测试为主进行分析 一、性能测试包含 1、启动时间测试 测试场景包 ...
分类：
移动开发 时间：
2016-12-22 14:41:12
阅读次数：
456
图灵机（英语：Turing machine），又称确定型图灵机，是英国数学家艾伦·图灵于1936年提出的一种抽象计算模型，其更抽象的意义为一种数学逻辑机，可以看作等价于任何有限逻辑数学过程的终极强大逻辑机器。 目录 [隐藏] 1图灵的基本思想 2图灵机的正式定义 3图灵机的基本术语 4图灵机的例子 ...
分类：
其他好文 时间：
2016-12-16 16:59:55
阅读次数：
346
虚拟机及云计算模型介绍OpenStackOverviewOpenStack演示架构、Keystone基础及部署Glance基础原理及部署应用
分类：
其他好文 时间：
2016-12-10 07:19:24
阅读次数：
167
1.MapReduce原理(****理解***) Ø 思考：怎样解决海量数据的计算？ Ø MapReduce概述 MapReduce是一种分布式计算模型，由Google提出，主要用于搜索领域，解决海量数据的计算问题. l MapReduce由两个阶段组成： u map()：任务分解 u reduce ...
分类：
其他好文 时间：
2016-11-30 23:11:45
阅读次数：
299
响应式编程是一种面向数据流和变化传播的编程范式。这意味着可以在编程语言中很方便地表达静态或动态的数据流，而相关的计算模型会自动将变化的值通过数据流进行传播。 响应式编程是一种面向数据流和变化传播的编程范式。这意味着可以在编程语言中很方便地表达静态或动态的数据流，而相关的计算模型会自动将变化的值通过数 ...
分类：
其他好文 时间：
2016-11-28 20:40:25
阅读次数：
325
