一、计算机与算法 计算 = 信息处理 计算模型 = 计算机 = 信息处理工具 算法：特定计算模型下，解决特定问题的指令序列 要素：输入 输出 正确性 确定性 可行性 有穷性 好算法：正确 健壮 可读 效率 计算机，顾名思义是计算的机器，无论文字，声音，图片，视频在计算机看来都是数据，要对其进行计算， ...
分类：
其他好文 时间：
2017-08-14 11:26:06
阅读次数：
102
前言： 根据前面的几篇博客学习，现在可以进行MapReduce学习了。本篇博客首先阐述了MapReduce的概念及使用原理，其次直接从五个实验中实践学习（单词计数，二次排序，计数器，join，分布式缓存）。 一 概述 定义 MapReduce是一种计算模型，简单的说就是将大批量的工作（数据）分解（M ...
分类：
编程语言 时间：
2017-08-04 21:30:22
阅读次数：
869
MapReduce编程模型 一种分布式计算模型框架，解决海量数据的计算问题 MapReduce将整个并行计算过程抽象到两个函数 map(映射)：对一些独立元素组成的列表的每一个元素进行指定的操作，可以高度并行 reduce:对一个列表的元素进行合并 一个简单的MapReduce程序只需要指定map( ...
分类：
其他好文 时间：
2017-07-30 19:10:27
阅读次数：
135
本节内容介绍PhongModel（也就是上文说的反射光的计算模型），采用的计算方法是BlinPhong（也即是用视线方向V+光源方向L的和，与N做点积，随后幂化得到高光反射系数）下图采用了csdn博文http://blog.csdn.net/u010133610/article/details/52 ...
分类：
编程语言 时间：
2017-07-28 23:43:37
阅读次数：
621
windows下python科学计算库的下载地址：http://www.lfd.uci.edu/~gohlke/pythonlibs/（由于C运行库的问题，scipy在linux下可以用pip安装，而windows下不行） matpoltlib：绘图 numpy：矩阵运算 scipy：科学计算，高阶 ...
分类：
编程语言 时间：
2017-07-21 20:44:07
阅读次数：
176
你想建设一个能承受500万PV/每天的网站吗？500万PV是什么概念？服务器每秒要处理多少个请求才能应对？如何计算呢？答案参考：PV是什么：PV是pageview的简写。PV是指页面的访问次数，每打开或刷新一次页面，就算做一个pv。计算模型：每台服务器每秒处理请求的数量=((80%总PV量)/..
分类：
Web程序 时间：
2017-07-19 17:46:26
阅读次数：
209
Spark大数据计算框架、架构、计算模型和数据管理策略及Spark在工业界的应用。围绕Spark的BDAS项目及其子项目进行了简要介绍。目前，Spark生态系统已经发展成为一个包含多个子项目的集合，其中包含SparkSQL、SparkStreaming、GraphX、MLlib等子项目，本章只进行简要介绍，后续章..
分类：
其他好文 时间：
2017-07-07 20:18:35
阅读次数：
128
前言Spark简介Spark是整个BDAS的核心组件，是一个大数据分布式编程框架，不仅实现了MapReduce的算子map函数和reduce函数及计算模型，还提供更为丰富的算子，如filter、join、groupByKey等。是一个用来实现快速而同用的集群计算的平台。Spark将分布式数据抽象为弹性分布式数据集..
分类：
其他好文 时间：
2017-07-07 19:56:19
阅读次数：
183
云计算模型的三种模型 – 基础架构即服务（IaaS）、软件即服务（SaaS）和平台即服务（PaaS） —— 正在快速演变。而云服务提供商都试图在模式栈的上下两个方向进行扩展，以期能提供一站式的IT服务。 Jeffrey Kaplan是咨询公司ThinkStrategies Inc.的常务董事，他认为 ...
分类：
其他好文 时间：
2017-06-12 14:36:07
阅读次数：
231
传说中的Hadoop，我终于来对着你唱"征服"了，好可爱的小象，！J 总的来说，hadoop的思路比较简单(map-reduce)，就是将任务分开进行，最后汇总。但这个思路实现起来，比较复杂，但相对于几年前Intel等硬件公司提出的网格运算等方式，显得更加开放。 你难任你难，哥就是头铁！ Tip：实 ...
分类：
其他好文 时间：
2017-05-22 23:25:38
阅读次数：
1698
