理论基础:Hadoop 分布式文件系统架构HDFS 负责大数据存储MapReduce 负责大数据计算namenode master守护进程datanode slaves上负责存储的进程secondarynamenode master上提供周期检查和清理任务的进程jobtracker maste...
分类:
其他好文 时间:
2014-10-03 01:34:04
阅读次数:
451
当今的我们已经处于计算机比较发达的时代,计算机的很多技术已经发展很久,很多我们现在使用的都是在一定基础结构之上的研究,
就好像我们学会了hadoop,webservices.....,学会了大数据计算,就是掌握了分布式技术吗? 感觉心慌、疑惑。这些疑惑不知道从什么时候开始的,
所以要想弄清是怎么回事,还是回到遥远的过去吧.........
分类:
其他好文 时间:
2014-09-27 04:51:49
阅读次数:
204
分布式计算被誉为高端的东东,我想也是每个程序员都想涉足的领域了。前一段时间项目中遇到了大数据计算的问题,一般计算时间都要2~3小时,甚至一整天的。我想能不能利用多台机器分布式计算,减少计算时间呢?当前分布式计算框架主要有hadoop, google的map/reduce,或一些其它的框架。但这些东东...
分类:
编程语言 时间:
2014-09-25 14:29:29
阅读次数:
381
题目链接:
huangjing
思路:
这个题目应该随便怎么搞都可以,我说一下我的思路,可以根据题目的数据计算出价值的取值范围为0~10000,所以用一个1w的数组表示数组,下标代表价值,数组值代表数目,
然后这个题目要特判一下全是一样的值的情况。
题目:
Grade
Time Limit: 3000/1500 MS (Java/Others) Memory Lim...
分类:
其他好文 时间:
2014-09-22 19:30:13
阅读次数:
279
软件开发概述软件:用程序去处理数据 通过一系列计算机语言处理数据 计算机语言的发展:机器语言-->汇编语言-->高级语言开发软件的流程: 1.分析问题(读题) 2.建模(画流程图,定义算法:顺序、分支和循环) 算法的特性:1.确定性2.有效性3.有穷性4.可以没有输入5....
分类:
其他好文 时间:
2014-09-15 19:24:39
阅读次数:
255
MeanandStandardDeviation-从文件中读取数据计算其平均数和标准差//MeanandStandardDeviation-从文件中读取数据计算其平均数和标准差
#include<iostream>
#include<fstream>
#include<cstdlib>
#include<cmath>
intmain()
{
usingnamespacestd;
ifstr..
分类:
其他好文 时间:
2014-09-03 02:45:06
阅读次数:
209
程序说到底就是对数据的处理,所以首先要弄清楚需要处理哪些数据,计算机如何存储这些数据。C语言根据需要,抽象出了一些基本数据类型和衍生数据类型。这些可以满足大部分需求,更复杂的抽象数据类型亦可通过它们来组成。1. 数据存储 计算机存储的最小单位是bit,它表示0或1。而计算机可寻址的最小单位是b...
分类:
其他好文 时间:
2014-08-29 10:58:07
阅读次数:
302
数据类型什么是数据?数据在我们的生活中随处可见,工资数据,股票数据,个人资料数据等等这些都可以称为数据。计算机就是为处理数据而生,从开始的数字数据计算到现在的多媒体数据的综合处理。那这些数据应该怎么去在计算机中以什么样的格式去存储和处理呢?这就需要用到我们数..
分类:
编程语言 时间:
2014-08-28 14:59:00
阅读次数:
159
根据问题转换成最长不降子序列问题。
10^9的输入数据计算起来还是挺花时间的。因为这里只能使用O(nlgn)时间复杂度了。不过证明是可以算出10^9个数据的。因为时间限制是5s.
#include
#include
#include
#include
#include
#include
#include
#include
#include
#include
#include...
分类:
其他好文 时间:
2014-08-27 10:56:47
阅读次数:
174
1 数据和计算机数据和计算机的联系计算机存在的意义是管理数据。数据和信息的区别数据:基本值。信息:经过组织或处理后有含义的数据。计算机可以存储、表示的数据包括数字文本音频图像和图形视频上述这些数据最终都被存储为二进制数字,简单说即是由0和1表示。数据压缩2 模拟数据和数字数据自然办的大部分都是连续和...
分类:
其他好文 时间:
2014-08-24 22:00:53
阅读次数:
506