1、Java虚拟机运行时的数据区2、常用的内存区域调节参数-Xms：初始堆大小，默认为物理内存的1/64(输出到日志文件来查看GC的状况； 3）jmap –heap可用于查看各个内存空间的大小；5）断代法可用GC汇总一、新生代可用GC1）串行GC(Serial Copying)：client模式下默...
分类：
其他好文 时间：
2015-10-09 22:38:46
阅读次数：
265
曾几何时，我也敲打过无数次这样的命令： ????然而之前的我都只关心过版本号，也就是第一行的内容。今天，我们就来看看第3行输出的内容：JVM的工作模式。 ????通过百度搜索，只能搜到几篇被重复转载...
分类：
其他好文 时间：
2015-09-17 21:50:57
阅读次数：
209
System.exit() 的本质是通知 JVM 关闭。一般来说，有两种禁用 System.exit() 的办法：
安全管理器
安全策略
本质都是JRE 提供的本地实现，在执行之前进行权限判断。因为System.exit() 是一种很暴力的手段，如果在 Client 模式下自己写个小程序无所谓,但是在 Server 上多个程序、或者多线程时就会有很大的麻烦...
分类：
其他好文 时间：
2015-08-25 16:32:27
阅读次数：
250
Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。部署在单台机器上时，既可以用本地（Local）模式运行，也可以使用伪分布式模式来运行；当以分布式集群部署的时候，可以根据自己集群的实际情况选择Standalone模式（Spark自带的模式）、YARN-Client模式或者YARN-Cluster模式。...
分类：
其他好文 时间：
2015-08-19 09:29:03
阅读次数：
241
在用spark-submit提交作业时，用sbt package打包好的jar程序，可以很好的运行在client模式，当在cluster模式，一直报错：Exception in thread "main" java.lang.ClassNotFoundException。决定利用sbt assemb...
分类：
编程语言 时间：
2015-08-10 19:34:35
阅读次数：
184
1、Serial收集器曾经是虚拟机新生代收集的唯一选择，是一个单线程的收集器，在进行收集垃圾时，必须stop the world，它是虚拟机运行在Client模式下的默认新生代收集器。
2、Serial Old是Serial收集器的老年代版本，同样是单线程收集器，使用标记整理算法。
3、ParNew收集器是Serial收集器的多线程版本，许多运行在Server模式下的虚拟机中首选的新生代收集器...
分类：
编程语言 时间：
2015-07-31 22:03:47
阅读次数：
178
这个问题的原因有几个：1、客户端安装的机器一般是虚拟机，虚拟机的名称可能是随便搞的，然而，yarn-client模式提交任务，是默认把本机当成driver的。所以导致其他的机器无法通过host的name直接访问这台机器。报错就是Failed to connect to driver at x.x.x...
分类：
其他好文 时间：
2015-07-22 18:20:15
阅读次数：
554
Spark应用概念Spark应用（Application）是用户提交的应用程序。执行模式又Local、Standalone、YARN、Mesos。根据Spark Application的Driver Program是否在集群中运行，Spark应用的运行方式又可以分为Cluster模式和Client模式。
下面是Spark应用涉及的一些基本概念：
Application：Spark 的应用...
分类：
其他好文 时间：
2015-07-08 16:39:37
阅读次数：
178
参 数
描 述
UseSerialGC
虚拟机运行在Client 模式下的默认值，打开此开关后，使用Serial +
Serial Old 的收集器组合进行内存回收
UseParNewGC
打开此开关后，使用ParNew + Serial Old 的收集器组合进行内存回收
UseConcMarkS...
分类：
其他好文 时间：
2015-07-03 10:41:32
阅读次数：
168
一、网络测试工具iperf
1、安装包
apt-get-yinstalliperf
2、参数说明
-s,--serverruninservermode(以server模式启动)
-c,--client<host>runinclientmode,connectingto<host>(以client模式启动)
-p,--portnsetserverporttolistenon/connecttoton(default5001)指定..
分类：
其他好文 时间：
2015-06-30 18:39:00
阅读次数：
307
