码迷,mamicode.com
首页 >  
搜索关键字:大数据 云计算 vmware hadoop    ( 36549个结果
Mahout学习
Mahout小案例学习,实现k-means算法。环境:OS:Centos 6.5 x64 & Soft:Hadoop 1.2.1 & Mahout 0.91、下载测试数据[huser@master hadoop]$ wget http://archive.ics.uci.edu/ml/databas...
分类:其他好文   时间:2014-05-04 12:34:58    阅读次数:340
MAPR 开发环境搭建过程记录
我下载了MAPR 官方提供的virtualbox 和 vmware版本的sandbox进行试用.开始试用了一会vmware版的,因为不太熟悉vmware的操作,而且vmplayer经常没有反应,后来改用了virtualbox版.因为sandbox是单机版的,所以必须把网络设置设为host only,...
分类:其他好文   时间:2014-05-04 12:31:44    阅读次数:319
Hadoop MRUnit使用(一)
之前在写MR job的时候,由于要在云梯,或者一淘的开发集群上运行;所以处理方法是,在本地打成jar包,然后scp到客户端网关机上,然后在提交job运行。这样的问题时,有时候如果遇到一些逻辑上的问题,job跑挂了。必须在本地修改程序,然后重新打包,scp,再运行,这样比较麻烦;询问了一圈,觉得采用M...
分类:其他好文   时间:2014-05-04 10:54:29    阅读次数:427
ubuntu下hadoop环境配置
软件环境: 虚拟机:VMware Workstation 10 操作系统:ubuntu-12.04-desktop-amd64 JAVA版本:jdk-7u55-linux-x64 Hadoop版本:hadoop-1.2.1 Hadoop下载地址:http://mirrors.cnnic.cn/apa...
分类:其他好文   时间:2014-05-04 10:43:51    阅读次数:370
大数据时代与个人隐私的矛盾
从父子骑驴的故事随想到大数据时代与个人隐私的矛盾。对于大数据时代和隐私的矛盾,厂商对于大数据无疑是收集用户信息(例如使用习惯、搜索过的信息等等),然后推广给用户更实际的东西和更精准的广告。百度搜索、腾讯QQ、搜狗输入法、奇虎360这些常用工具一直都在收集用户所谓的隐私信息人言可畏,该说哪个厂家在.....
分类:其他好文   时间:2014-05-04 10:34:18    阅读次数:375
使用hadoop multipleOutputs对输出结果进行不一样的组织
MapReduce job中,可以使用FileInputFormat和FileOutputFormat来对输入路径和输出路径来进行设置。在输出目录中,框架自己会自动对输出文件进行命名和组织,如:part-(m|r)-00000之类。但有时为了后续流程的方便,我们常需要对输出结果进行一定的分类和组织。...
分类:其他好文   时间:2014-05-04 10:22:15    阅读次数:341
VMware 10安装CentOs 6.5
最近重新看鸟哥,准备装CentOs,一看最新版本是6.5,书上是5.X的,略有点不同,二话不说,搞起~ 我的VMware版本是10.0.1 build-1379776 先新建一个虚拟机,挂上iso文件(两个iso挂第一个就行了,另一个放在同一目录下) 启动,出现以下画面 Install or upgrade an existing system 安装或升级现有的系统 install...
分类:其他好文   时间:2014-05-04 09:04:44    阅读次数:376
LVS_NAT实验过程...
LVS-NAT是通过改变数据包中的目的IP地址,来实现调度的.拓扑图:说明:Director是调度服务器、RealN为真实服务器(这里用四台).实验用vmware虚拟机和小凡模拟器来完成,为了保证物理上确实是隔离开的,需要不同的vmnet网卡相连.lClient与路由器之间用vmnet1连接;l路由器与Director之..
分类:其他好文   时间:2014-05-03 20:43:31    阅读次数:551
vmware P2V迁移同步实践
作者:杨坚第一部分:P2V迁移P2V迁移需要使用VMwarevCenterConverterStandalone5.0,该软件提供了一种易于使用的解决方案,可以从物理机(运行Windows和Linux)、其他虚拟机格式及第三方映像格式自动创建VMware虚拟机。通过简单易用的向导驱动界面和集中管理控制台,ConverterS..
分类:其他好文   时间:2014-05-03 20:40:02    阅读次数:599
DHCP NFS PXE TFTP安装CentOS
服务器IP:192.168.1.101系统CentOS6.4以下所有的操作都是在服务器端;客户端是在VMware上操作的,网络要选择NAT模式。1.需要在服务器端安装的软件:dhcptftp-serverxinetdsyslinuxnfs-utils安装:yumdhcp*tftp*syslinux*nfs-utils2.安装完后修改配置文件:vim/etc/dhcp/dhcpd.c..
分类:其他好文   时间:2014-05-03 20:35:43    阅读次数:376
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!