码迷,mamicode.com
首页 >  
搜索关键字:大数据 云计算 vmware hadoop    ( 36549个结果
VMware 虚拟机(linux)增加根目录磁盘空间
今天查看学校的监控报修系统,不能访问了!!!系统运行很慢,用top命令查看发现内存使用率90%,用"df -h ”查看“/”目录使用率已达到80%,导致系统运行很慢。我用以下方法扩大根目录磁盘空间。一、关闭你的虚拟机系统,找到如下内容:选择"Edit Virtual mache settings”点...
分类:系统相关   时间:2014-05-12 17:23:35    阅读次数:649
Hadoop初学指南(5)--MapReduce入门
本文将介绍Hadoop中的重点MapReduce的入门知识。(1)MapReduce概述MapReduce是一种分布式计算模型,由Google提出,主要用于搜索领域,解决海量数据的计算问题。MR由两个阶段组成:Map和Reduce,在Hadoop中用户只需要实现map()和reduce()两个函数,即可实现分布式计算,非常简单..
分类:其他好文   时间:2014-05-03 01:53:48    阅读次数:519
Hadoop初学指南(6)--MapReduce的简单实例及分析
本文在上一节的基础上通过一个简单的MR示例对MapReduce的运行流程进行分析。假设有两行数据,分别是helloyou,hellome,我们要统计其中出现的单词以及每个单词出现的次数。所得的结果为hello2you1me1(1)大致运行流畅1.解析成2个<k,v>,分别是<0,helloyou><10,hel..
分类:其他好文   时间:2014-05-03 01:51:40    阅读次数:382
Vmware vSphere Clinet 5.5 Win2003 WinXp无法连接的处理
环境:Microsoft(R)Windows(R)Server2003,EnterpriseEditionServicePack2Microsoft(R)Windows(R)Serverxp,EnterpriseEditionServicePack3描述:安装VmwarevSphereClinet5.5过程中出现警告如下:VmwarevSphereClinet5.5安装在WindowsXP或者WindowsServer2003系统时,vSphere客户..
分类:Windows程序   时间:2014-05-03 01:06:15    阅读次数:11720
HDFS追本溯源:租约,读写过程的容错处理及NN的主要数据结构
Lease 的机制:hdfs支持write-once-read-many,也就是说不支持并行写,那么对读写的互斥同步就是靠Lease实现的。Lease说白了就是一个有时间约束的锁。客户端写文件时需要先申请一个Lease,对应到namenode中的LeaseManager,客户端的client name就作为一个lease的holder,即租约持有者。LeaseManager起什么作用呢? 读写过程的容错是怎么做的?数据块是如何复制的?数据块的恢复机制?本文都有涉及。...
分类:其他好文   时间:2014-05-02 23:22:14    阅读次数:450
Ubuntu14下Hadoop开发<1> 基础环境安装
在Ubuntu14.04下使用Hadoop2.4进行大数据开发之基础环境准备篇...
分类:其他好文   时间:2014-05-02 19:56:21    阅读次数:367
通过secondary namenode恢复崩溃的namenode
模拟namenode崩溃,将name目录的内容全部删除,然后通过secondary namenode恢复namenode。环境:OS:Centos 6.5 x64 & Soft:Hadoop 1.2.11、进入name目录下,删除name目录内容。[huser@master name]$ pwd/h...
分类:其他好文   时间:2014-05-02 14:44:28    阅读次数:517
关系型数据库与非关系型数据库
关系型数据库与非关系型数据库自1970年,埃德加·科德提出关系模型之后,关系数据库便开始出现,经过了40多年的演化,如今的关系型数据库具备了强大的存储、维护、查询数据的能力。但在关系数据库日益强大的时候,人们发现,在这个信息爆炸的“大数据”时代,关系型数据库遇到了性能方面的瓶颈,面对一个表中上亿条的...
分类:数据库   时间:2014-05-02 09:02:06    阅读次数:365
Linux 日志异常tpvmlpd[4966]: device type not supported
1.虚拟机vmware下linuxmessage日志异常信息如下:......Nov2519:33:17rac1tpvmlpd[4415]:devicetypenotsupportedNov2519:33:32rac1tpvmlpd[4521]:devicetypenotsupportedNov2519:33:47rac1tpvmlpd[4681]:devicetypenotsupportedNov2519:34:02rac1tpvmlpd[4831]:devicetypenotsu..
分类:系统相关   时间:2014-05-02 04:29:05    阅读次数:602
Windows Azure Online Backup是一套基于云技术的在线备份
WindowsAzureOnlineBackup是一套基于云技术的在线备份解决方案。你可以通过它将文件备份到云端的数据中心,在本地文件出现损坏或丢失时,他将给你提供更为安全可靠的文件恢复。微软将它作为本地备份解决方案的替代产品。它提供块级存储的增量备份(就是说备份系统仅仅更改数据..
分类:Windows程序   时间:2014-05-02 03:30:41    阅读次数:425
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!