欢迎转载，转载请注明出处,徽沪一郎。概要之所以对spark shell的内部实现产生兴趣全部缘于好奇代码的编译加载过程，scala是需要编译才能执行的语言，但提供的scala repl可以实现代码的实时交互式执行，这是为什么呢？既然scala已经提供了repl，为什么spark还要自己单独搞一套sp...
分类：
其他好文 时间：
2014-07-07 14:29:15
阅读次数：
205
欢迎转载，转载请注明出处，徽沪一郎。概要本文以wordCount为例，详细说明spark创建和运行job的过程，重点是在进程及线程的创建。实验环境搭建在进行后续操作前，确保下列条件已满足。下载spark binary 0.9.1安装scala安装sbt安装java启动spark-shell单机模式运...
分类：
其他好文 时间：
2014-07-07 14:14:34
阅读次数：
231
alias ll='ls -al'use_color=false# Set colorful PS1 only on colorful terminals.# dircolors --print-database uses its own built-in database# instead of ...
分类：
其他好文 时间：
2014-07-07 13:41:54
阅读次数：
245
本书的这部分对MongoDB进行了一个大致的简介。包括了Javascript Shell和Ruby驱动，这俩都有例子 在第一章，我们将了解到MongoDB的历史，设计目的和实际使用的场景。我们还将了解到是什么MongoDB如此与众不同以至于我们使用NoSQL还命名它。 在学习第二章后，你会对Mong...
分类：
数据库 时间：
2014-07-03 11:14:45
阅读次数：
230
shell之文本过滤（正则表达式）分类：linux shell脚本学习2012-09-14 12:59213人阅读评论(0)收藏举报当从一个文件或命令输出中抽取或过滤文本时，可以使用正则表达式（R E） ，正则表达式是一些特殊或不很特殊的字符串模式的集合。^ 只只匹配行首$ 只只匹配行尾* 只一个单...
分类：
其他好文 时间：
2014-06-30 22:58:45
阅读次数：
224
为何使用Shell脚本分类：linux shell脚本学习2012-09-12 17:1878人阅读评论(0)收藏举报shell脚本任务工作 s h e l l 脚本在处理自动循环或大的任务方面可节省大量的时间，且功能强大。如果你有处理一个任务的命令清单，不得不一个一个敲进去，然后观察输出结果，再决...
分类：
其他好文 时间：
2014-06-30 22:05:36
阅读次数：
310
ctrl+c和ctrl+z都是中断命令,但是他们的作用却不一样.ctrl+c是强制中断程序的执行,而ctrl+z的是将任务中断,但是此任务并没有结束,他仍然在进程中他只是维持挂起的状态,用户可以使用fg/bg操作继续前台或后台的任务,fg命令重新启动前台被中断的任务,bg命令把被中断的任务放在后台执...
分类：
系统相关 时间：
2014-06-30 22:02:32
阅读次数：
328
shell之文本过滤（awk）分类：linux shell脚本学习2012-09-19 15:531241人阅读评论(0)收藏举报shell正则表达式脚本任务语言如果要格式化报文或从一个大的文本文件中抽取数据包，那么awk可以完成这些任务。为了获取所需信息，文本必须格式化，也就是说要使用域分隔符来划...
分类：
其他好文 时间：
2014-06-30 21:15:20
阅读次数：
324
shell之文本过滤（grep）分类：linux shell脚本学习2012-09-14 14:17588人阅读评论(0)收藏举报shell正则表达式扩展工具存储grep（全局正则表达式版本）允许对文本文件进行模式查找。如果找到匹配模式， grep打印包含模式的所有行。grep支持基本正则表达式，也...
分类：
其他好文 时间：
2014-06-30 20:47:27
阅读次数：
192
1. 在Bourne shell / Bourne-again shell 和Korn shell中，digit1> & digit2 表示要将描述符digit1 重定向至描述符digit2的同一文件。请说明下面两条命令的区别。./a.out > outfile 2> &1./a.out 2>&1 ...
分类：
其他好文 时间：
2014-06-30 20:44:21
阅读次数：
234
