一、zookeeper
Zookeeper 是 Google 的 Chubby一个开源的实现,是 Hadoop 的分布式协调服务,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等
Zookeeper服务器集群规模不小于3个节点,要求各服务器之间系统时间要保持一致。ZooKeeper的搭建是为了后面HBase的使用。
二、集群模式搭建
我的集群是Hadoop...
分类:
其他好文 时间:
2016-05-13 03:14:19
阅读次数:
134
SparkStreaming...
分类:
其他好文 时间:
2016-05-13 03:12:51
阅读次数:
96
Chapter 8. Scaling Redis (Beyond a Single Instance)精彩的总在最后,终于来到这一章了!本章讲述通过多实例来进行水平扩展,重要的概念有:persistence, replication, partitioning。Persistence内存是临时的, 易失性存储, 为防止数据丢失, Redis提供了两种persistence的方法:Redis Data...
分类:
其他好文 时间:
2016-05-13 03:13:23
阅读次数:
115
不容易系列之二
Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 65536/32768 K (Java/Others)
Total Submission(s): 23681 Accepted Submission(s): 18920
Problem Description
你活的不容易,我活的不容易,他活...
分类:
其他好文 时间:
2016-05-13 03:14:19
阅读次数:
123
PIM IGMP Snooping Bootstrap...
分类:
其他好文 时间:
2016-05-13 03:13:12
阅读次数:
200
获取和推送镜像
查找镜像
从docker hub官网上查看,或者使用search命令查看.
在docker hub官网上注册一个账号.
拉取镜像
还是那句话,如果直接pull镜像的话,是很慢的,而且很容易出现错误信息.楼主也找到了解决办法:
使用daocloud的加速器,楼主感觉也不快...
https://dashboard.daoclou...
分类:
其他好文 时间:
2016-05-13 03:12:26
阅读次数:
162
cd /etc/sysconfig/network-scripts/
[root@rgdefmdb1 network-scripts]# cat ifcfg-bond0
DEVICE=bond0
NM_CONTROLLED=no #yes的话是不需要network restart,直接生效。
BOOTPROTO=static
ONBOOT=yes
IPADDR=10.225....
分类:
其他好文 时间:
2016-05-13 03:11:40
阅读次数:
939
一:课程结构
二:hadoop是什么
hadoop是适合大数据的分布式存储与计算的平台
三:数据的分布式存储
四:hadoop中的概念
在分布式存储系统中,分散在不同节点中的数据可能属于同一个文件,为了组织众多的文件,把文件可以放到不同的文件夹中,文件夹可以一级一级的包含。我们把这种组织形式称为命名空间(namespace)。命名空间管理着整个服务...
分类:
其他好文 时间:
2016-05-13 03:12:12
阅读次数:
167
观察者模式是软件设计模式的一种。此种模式定义对象间的一种一对多的依赖关系,当一个对象的状态发生变化时,所有依赖它的对象都得到通知并自动更新。该模式通常被用来实现事件驱动处理系统。...
分类:
其他好文 时间:
2016-05-13 03:11:01
阅读次数:
248
术语退化多边形(degenerate polygon)常用来描述共线或重叠坐标位置的顶点集。共线顶点生成一线段。重叠顶点位置可以生成有多余线段、重叠边或长度为0的边的多边形。有时术语退化多边形也用于少于三个坐标位置的顶点队列。为了软件的鲁棒性,图形软件包可以拒绝退化或非平面的顶点集。但这要求额外的识别该问题的处理,因此图形系统常把这种考虑留给程序员。
凹多边形也会有相关的一些问题。对凹多边形的填充算法和其他子程序的实现比较复杂,因此在处理前常将凹多边形分割成一组凸多边形以便提高效率。和其他的多...
分类:
其他好文 时间:
2016-05-13 03:11:33
阅读次数:
238
which命令用于查找并显示给定命令的绝对路径,环境变量PATH中保存了查找命令时需要遍历的目录。which指令会在环境变量$PATH设置的目录里查找符合条件的文件。也就是说,使用which命令,就可以看到某个系统命令是否存在,以及执行的到底是哪一个位置的命令。语法:which (选项) (参数)选项:-n:制定文件名长度,指定的长度必须大于或等于所有文件中最长的文件名;
-p:与-n参数相同,但...
分类:
其他好文 时间:
2016-05-13 03:10:29
阅读次数:
155
运行流程当你在MapReduce程序中调用了Job实例的Submit()或者waitForCompletion()方法,该程序将会被提交到Yarn中运行
其中的过程大部分被Hadoop隐藏起来了,对开发者来说是透明的
程序运行的过程涉及到个概念:
1.Client:提交程序的客户端
2.ResourceManager:集群中的资源分配管理
3.NodeManager:启动和监管各...
分类:
其他好文 时间:
2016-05-13 03:09:26
阅读次数:
175
caffe中imagenet的模型里用的图片是imagenet官网的数据,我在想如何修改这个训练数据,训练自己的图片。
在/caffe-master/data/ilsvrc12中有三个txt文件,分别列出了训练用到的图片:
训练集
测试集
验证集
我估计要做十个类型的图片,所以首先要生成自己的图像文件目录。参照薛开宇caffe笔记二,使用命令如下:
在caff...
分类:
其他好文 时间:
2016-05-13 03:08:53
阅读次数:
161
Problem hereProblemDrazil is playing a math game with Varda.Let’s define for positive integer x as a product of factorials of its digits. For example, First, they choose a decimal number a consisting...
分类:
其他好文 时间:
2016-05-13 03:10:26
阅读次数:
115
#include "opencvlib.h"
using namespace cv;int main()
{
Mat img_1 = cv::imread("1.png");
Mat img_2 = cv::imread("2.png"); imshow("img1", img_1);
imshow("img2", img_2); if (!img_1.data...
分类:
其他好文 时间:
2016-05-13 03:09:32
阅读次数:
175
要求大家按照课件中的方式定义链表数据结构,链表的成员函数自己定义,有哪些功能也自己定义,但是必须有如下两个函数:
返回链表中最小的元素:Type SeqList::Get_Min();//使用非递归方式
将链表中元素逆置:List::reverse();//使用递归和非递归两种方式,非递归方式只允许常数单位个额外空间
设计主函数,主函数中能够对所作函数进行测试,并且能够将链表中最小值找到,将链表...
分类:
其他好文 时间:
2016-05-13 03:10:43
阅读次数:
118
客户端有哪些架构?
MVC(简略)
M层为数据层,两个用途:1保存数据;2发送数据更新信息;
V层为视图层,两个用途:1接受用户从界面上的操作;2根据M层的数据显示相应的界面;
C层为控制层,两个用途:1处理和界面无关的代码逻辑;2接受和处理网络数据;
MVP
很多时候视图层面还是充斥中很多复杂的逻辑,例如UI事件的响应处理,网络响应的回调等等,充斥着各种监听器的回调。我们期望视图V便...
分类:
其他好文 时间:
2016-05-13 03:09:15
阅读次数:
114