怎样才能让程序花费的时间最短?Hadoop 是分布式处理系统，可以从两方面进行入手：控制任务的处理数量，使之均衡分布在每个reduce上，不会使哪个任务因为数据量多大而使用过长的时间；增加reduce到一定的数量。 另外的制约因素是tasktracker的负载，一个tasktracker能同时运行多 ...
分类：
其他好文 时间：
2018-07-13 01:26:18
阅读次数：
244
说明： 本次ELK的基础配置如下： 虚拟机：vmware 11 系统：centos7.2 两台 IP：172.16.1.15/16 一、下载es wget https://download.elastic.co/elasticsearch/release/org/elasticsearch/dist ...
分类：
其他好文 时间：
2018-07-12 20:12:09
阅读次数：
192
博客内容来自我啃的Hadoop权威指南，记录一下帮助自己理一下思路 一、文件读取 步骤1，客户端通过调用 FileSystem 对象的 open() 方法来打开想读取的文件，对于 HDFS 来说，这个对象是分布式文件系统（DistributedFileSystem）的一个实例 步骤2，Distrib ...
分类：
其他好文 时间：
2018-07-08 21:16:38
阅读次数：
246
1、pip安装 yum -y install epel-release && yum -y install python-pip 2、pip安装软件 (1)安装单个软件：pip install PackageName (2)更新单个软件：pip install --upgrade PackageNa ...
分类：
其他好文 时间：
2018-07-07 15:49:51
阅读次数：
215
一.本地数据库事务 1.事务ACID理解 原子性【Atomicity】:一次事务的多次操作是原子的，要么全部执行，要么全部不执行。 一致性【Consistency】:事务前后数据库的约束保持一致性，比如键值约束。 隔离性【Isolation】:事务之前有一定隔离机制，不用隔离级别。 持久性【Dura ...
分类：
数据库 时间：
2018-07-04 18:52:41
阅读次数：
149
1、简单阈值 如同简单阈值的名字一样，这种处理方式也的确比较简单。当像素值高于阈值时，将该像素设为白色或者黑色。OpenCV中使用cv2.threshold()函数来实现。该函数的定义如下： double cv::threshold(InputArray src, OutputArray dst, ...
分类：
其他好文 时间：
2018-06-28 17:30:42
阅读次数：
221
安装PHP时显示，xml2-confignotfound这里需要安装的是libxml2-dev软件包（该软件为Ubuntu-Server自带的，需要使用Ubuntu-Server光盘安装），操作如下：sudoapt-getinstalllibxml2-dev库文件安装完成后，重新配置PHP编译完成后将会看到“ThankyouforusingPHP.”的字样，表明PHP已经配置成功了。错误1：Can
分类：
Web程序 时间：
2018-06-26 00:49:37
阅读次数：
396
一、MySQL权限简介 关于mysql的权限简单的理解就是mysql允许你做你全力以内的事情，不可以越界。比如只允许你执行select操作，那么你就不能执行update操作。只允许你从某台机器上连接mysql，那么你就不能从除那台机器以外的其他机器连接mysql。 那么Mysql的权限是如何实现的呢 ...
分类：
数据库 时间：
2018-06-25 19:02:27
阅读次数：
230
1、首先启动CentOS 7,在VMware中点击上方“VM”，点击“Install VMware Tools...”（如已安装则显示“Reinstall VMware Tools...”）。 2、在命令行输入“ls /dev”查看。 3、输入“mkdir /mnt/cdrom”在/mnt目录下新建 ...
分类：
其他好文 时间：
2018-06-21 13:33:30
阅读次数：
971
