简介 Husky是一个大数据分布式开发框架,用C++开发,因为粗粒度(coarse-grained)平台(如Spark,Hadoop,Flink)MR耗时太大,然后细粒度(fine-grained)平台(GraphX等)编程难度较大,同时细粒度在数据平台之间转移会很耗时。Husky就是在粗粒度和细粒 ...
分类:
系统相关 时间:
2016-07-14 01:18:28
阅读次数:
448
ssh 加密的网络协议,提供客户-服务模式。 登录 ssh username@ip ssh ip #不提供用户名是默认使用当前用户的用户名 -C选项:数据在传输过程中被压缩 -p+端口号:指定端口号(默认端口号22) -v选项:调试模式 -F+文件路径:使用指定的配置文件 参考:https://li ...
分类:
系统相关 时间:
2016-07-14 01:16:24
阅读次数:
497
简介 有些软件比较新,需要更高的gcc版本,所以需要升级gcc。编译安装比较耗时,所以直接选择bin包就好。 步骤 添加源 安装依赖的包(出现错误才需要这个) 升级安装 更新链接 查看版本 参考 http://www.cnblogs.com/BlackStorm/p/5183490.html htt ...
分类:
系统相关 时间:
2016-07-14 01:13:24
阅读次数:
273
大家好,我是一个来自沈阳的IT农民工<纯屌丝>。2012年没有毕业的时候就选择了离校实习,那时候觉得学校学习的东西没有在社会上学习东西多。一个人拿着行李去了广东,就是想多学习学习在课本上没有的东西并且去外边见一见。在毕业的时候又回到了东北,拿着自己的毕业证来..
分类:
系统相关 时间:
2016-07-13 23:45:12
阅读次数:
485
在Linux中最基本的任务之一就是设置文件权限。理解它们是如何实现的是你进入Linux世界的第一步。如您所料,这一基本操作在类UNIX操作系统中大同小异。实际上,Linux文件权限系统就直接取自于UNIX文件权限(www.lampbrother.net)。但不要以为理解文件权限需要长时间的学习。事..
分类:
系统相关 时间:
2016-07-13 23:41:29
阅读次数:
486
birtChart在linux下中文乱码的问题是Java虚拟机找不到中文字库字体文件造成的。步骤:1、把.bash_profile中的exportLANG=zh_CN.GB2312修改为:exportLANG=zh_CN.GB18030。因为gb2312不支持一些特殊的汉字。2、在在生成的chart图表的XMLSource里修改字体:把SansSerif修改为SimS..
分类:
系统相关 时间:
2016-07-13 23:40:26
阅读次数:
551
[root@localhost~]#cat1.txt1ms2ms3ms4ms5ms[root@localhost~]#cat1.txt|awk‘{print$1"\047"}‘1ms‘2ms‘3ms‘4ms‘5ms‘[root@localhost~]#cat1.txt|awk‘{print$1"\047"}‘>2.txt[root@localhost~]#cat2.txt1ms‘2ms‘3ms‘4ms‘5ms‘
分类:
系统相关 时间:
2016-07-13 23:39:08
阅读次数:
325
空格可以用:\x00在awk处理文本后,将该文本追加入另一个文本,发现空格有点问题,用该符号可行
分类:
系统相关 时间:
2016-07-13 23:37:40
阅读次数:
326
在网上看过的安装教程真的是有点心酸呢。好多都失败了。分享下,自己实验成功可以用的博文供大家参考:推荐1给力星:http://www.powerxing.com/install-hadoop/hadoop+spark完全参考的他的博文,相当给力推荐指数5个星hive的话,我这边参考的文章太多了。没个能用的,不知道是..
分类:
系统相关 时间:
2016-07-13 23:38:30
阅读次数:
470
在Linux下常用的目录命令有lscdpwdmkdirrmdirtree1.ls命令ls用于某路径下列出文件列表-l:长格式(显示文件的详细信息)文件类型: -:普通文件f d:目录文件directory b:块设备文件block c:字符设备文件character l:符号链接文件symboliclink p:命令管道文件pipe s:套接字文件so..
分类:
系统相关 时间:
2016-07-13 23:38:12
阅读次数:
207
Linux下的文件管理命令有touchstatfilermcpmvnano1.touch用于文件的创建和删除touch原本是用来修改文件的时间戳,可以用来创建文件 -a修改文件的访问时间--date=‘‘date选项可以指定人类易读的字符串形式的日期比如"2011-11-1111:11:11""NextSaturday" -m修改文件的修改时间--da..
分类:
系统相关 时间:
2016-07-13 23:38:23
阅读次数:
250
cp命令-R,rrecursive-p--preserve=mode,ownership,timestamps-f强制复制覆盖-i提示信息-a--archive-dR--preserve=all[‘ɑrkav]归档复制,常用于备份-d--no-derefence--preservce=link-L--deferencealwaysfollowsymboliclinks-P--no-deference保持符号链接默认链接指向的文件mv..
分类:
系统相关 时间:
2016-07-13 23:35:18
阅读次数:
242
Linux进行文本处理的命令主要有cattactailheadlessmoresortuniqcuttrgrepsedawk1.cat用来查看某个文件的内容格式catfile_name#查看一个文件的内容catfile1file2.....#同时连接查看多个文件的内容常用的选项-n显示行号-E显示行结束符#Linux下面为$2.tac与cat类似,不过是倒序显..
分类:
系统相关 时间:
2016-07-13 23:35:56
阅读次数:
199
linuxgrep用法grep命令功能:输入文件的每一行中查找字符串。基本用法:grep[-acinv][--color=auto][-An][-Bn]‘搜寻字符串‘文件名参数说明:-a:将二进制文档以文本方式处理-c:显示匹配次数-i:忽略大小写差异-n:在行首显示行号-A:After的意思,显示匹配字符串后n行的数据-B..
分类:
系统相关 时间:
2016-07-13 23:36:22
阅读次数:
452
Linux下的权限管理与用户跟组的概念是分不开的。简单来说,Linux下的文件有三种权限rwx对于文件来说r:可读,可以使用类似cat等命令查看文件内容;w:可写,可以编辑或删除此文件;x:可执行,eXacutable,可以命令提示符下当作命令提交给内核运行;对于目录来说:r:可以对此目..
分类:
系统相关 时间:
2016-07-13 23:30:39
阅读次数:
268
最近练练linux下的基本操作,随意写点东西,也大致记录一下:网卡IP的获取ifconfig|grep‘inetaddr‘|sed‘s/^.*addr://g‘|grep-v‘127.0.0.1‘|sed‘s/Bcast.*//g‘---取消本地ip的获取,如果网卡较多,可以直接ifconfigeth*ifconfig|grep"inetaddr:"|awk-F:‘{print$2}‘|awk‘{print$1..
分类:
系统相关 时间:
2016-07-13 23:30:07
阅读次数:
234