先在IDEA新建一个maven项目 我这里用的是jdk1.8,选择相应的骨架 这里选择本地在window下安装的maven 新的项目创建成功 我的开始pom.xml文件配置 先在终端下试下打包 可以看到失败了!!! 把这几个生成默认的东西删除掉 再次测试 成功了 把他clean一下 进入自己在虚拟机 ...
分类:
其他好文 时间:
2017-08-11 23:52:51
阅读次数:
324
文章来源:http://www.pythoner.com/46.html 提起map和reduce想必大家并不陌生,Google公司2003年提出了一个名为MapReduce的编程模型[1],用于处理大规模海量数据,并在之后广泛的应用于Google的各项应用中,2006年Apache的Hadoop项 ...
分类:
编程语言 时间:
2017-08-10 13:29:34
阅读次数:
171
并发编程模型的分类 在并发编程中,我们需要处理两个关键问题:线程之间如何通信及线程之间如何同步(这里的线程是指并发执行的活动实体)。通信是指线程之间以何种机制来交换信息。在命令式编程中,线程之间的通信机制有两种:共享内存和消息传递。 在共享内存的并发模型里,线程之间共享程序的公共状态,线程之间通过写 ...
分类:
编程语言 时间:
2017-08-09 21:16:28
阅读次数:
242
上一篇 我们学习了简单的 Python TCP Socket 编程,通过分别写服务端和client的代码了解主要的 Python Socket 编程模型。本文再通过一个样例来加强一下对 Socket 编程的理解。 聊天室程序需求 我们要实现的是简单的聊天室的样例,就是同意多个人同一时候一起聊天。每一 ...
分类:
编程语言 时间:
2017-08-07 22:30:36
阅读次数:
829
1. 什么是spring? spring 是个Java企业级应用的开源开发框架。Spring主要用来开发Java应用,但是有些扩展是针对构建J2EE平台的web应用。Spring 框架目标是简化Java企业级应用开发,并通过POJO为基础的编程模型促进良好的编程习惯。 2. 使用Spring框架的好 ...
分类:
编程语言 时间:
2017-08-07 22:20:06
阅读次数:
254
. MapReduce基本编程模型和框架 1.1 MapReduce抽象模型 大数据计算的核心思想是:分而治之。如下图1所示。把大量的数据划分开来,分配给各个子任务来完成。再将结果合并到一起输出。 注:如果数据的耦合性很高,不能分离,那么这种并行计算就不适合了。 图1:MapReduce抽象模型 1 ...
分类:
其他好文 时间:
2017-08-05 19:01:47
阅读次数:
132
Spring概述1.什么是spring?Spring是个java企业级应用的开源开发框架。Spring主要用来开发Java应用,但是有些扩展是针对构建J2EE平台的web应用。Spring框架目标是简化Java企业级应用开发,并通过POJO为基础的编程模型促进良好的编程习惯。2.使用Spring框架的好处是什么?轻量:S..
分类:
编程语言 时间:
2017-08-02 22:13:24
阅读次数:
183
Spring 概述 1. 什么是spring? Spring 是个java企业级应用的开源开发框架。Spring主要用来开发Java应用,但是有些扩展是针对构建J2EE平台的web应用。Spring 框架目标是简化Java企业级应用开发,并通过POJO为基础的编程模型促进良好的编程习惯。 2. 使用 ...
分类:
编程语言 时间:
2017-08-02 22:10:12
阅读次数:
185
经常有人问我有关“大数据”的问题,而且多半情况下我们似乎是在各种不同的抽象和理解级别进行交谈。实时 和高级分析 之类的词语频频现身,并且我们总是立即开始谈论产品,这通常并不是一个好主意。 因此我们来回顾一下,从一个用例的角度出发来看看大数据的含义,然后我们可以将该用例与一个可用的高级基础架构图对应起 ...
分类:
其他好文 时间:
2017-07-31 20:04:12
阅读次数:
134
MapReduce编程模型 一种分布式计算模型框架,解决海量数据的计算问题 MapReduce将整个并行计算过程抽象到两个函数 map(映射):对一些独立元素组成的列表的每一个元素进行指定的操作,可以高度并行 reduce:对一个列表的元素进行合并 一个简单的MapReduce程序只需要指定map( ...
分类:
其他好文 时间:
2017-07-30 19:10:27
阅读次数:
135