接续《debian内核代码执行流程(二）》未完成部分下面这行输出信息是启动udevd进程产生的输出信息：[ 3.306217] udevd[49]: starting version 175175是udevd的版本号。根据《essential linux device drivers》中关于u...
分类：
其他好文 时间：
2014-07-10 00:55:36
阅读次数：
350
y欢迎转载，转载请注明出处，徽沪一郎。概要“spark已经比较头痛了，还要将其运行在yarn上，yarn是什么，我一点概念都没有哎，再怎么办啊。不要跟我讲什么原理了，能不能直接告诉我怎么将spark在yarn上面跑起来，I'm a dummy, just told me how to do it.”...
分类：
其他好文 时间：
2014-07-07 14:23:52
阅读次数：
278
欢迎转载，转载请注明出处，徽沪一郎。概要Hadoop2中的Yarn是一个分布式计算资源的管理平台，由于其有极好的模型抽象，非常有可能成为分布式计算资源管理的事实标准。其主要职责将是分布式计算集群的管理，集群中计算资源的管理与分配。Yarn为应用程序开发提供了比较好的实现标准，Spark支持Yarn部...
分类：
其他好文 时间：
2014-07-07 14:18:32
阅读次数：
297
为了构建基于Yarn体系的Spark集群，先要安装Hadoop集群，为了以后查阅方便记录了我本次安装的具体步骤。...
分类：
其他好文 时间：
2014-07-01 08:17:24
阅读次数：
576
继续上一篇文章《debian内核代码执行流程（一）》未完成部分。acpi_bus_init调用acpi_initialize_objects,经过一系列复杂调用后输出下面信息：[ 0.147393] ACPI: SSDT 7f5e7cc0 0030F (v01 PmRef Cpu0Ist ...
分类：
其他好文 时间：
2014-06-27 15:05:17
阅读次数：
246
首先client向ResourceManager提交程序（包含ApplicationMaster程序，ApplicationMaster启动命令，用户程序）后，ResourceManager向资源调度器去申请资源，一旦申请的ApplicationMaster需要的资源，ApplicationMasterLaucher便与对应的NodeManager联系启动ApplicationMaster，同时向...
分类：
移动开发 时间：
2014-06-27 10:46:44
阅读次数：
434
前提：1、spark1.0的包编译时指定支持hive：./make-distribution.sh --hadoop 2.3.0-cdh5.0.0 --with-yarn--with-hive--tgz2、安装完spark1.0；3、安装与hadoop对应的CDH版本的hive；Spark SQL ...
分类：
数据库 时间：
2014-06-26 11:24:11
阅读次数：
564
本文根据debian开机信息来查看内核源代码。系统使用《debian下配置dynamic printk以及重新编译内核》中内核源码来查看执行流程。使用dmesg命令，得到下面的开机信息：[ 0.000000] Initializing cgroup subsys cpuset[ 0.00...
分类：
其他好文 时间：
2014-06-25 09:50:01
阅读次数：
582
看了一篇文章《debug by printing》,文中提到了多种通过printk来调试驱动的方法，其中最有用的就是"Dynamic debugging"。“Dynamic debugging"的官方文档：http://git.kernel.org/cgit/linux/kernel/git/tor...
分类：
其他好文 时间：
2014-06-23 00:58:42
阅读次数：
443
Swift提供了类C语言类似的控制流结构。包括for循环和while循环来多次执行任务，if和switch语句根据不同的条件执行不同的分支代码，break和continue语句将执行流程跳转到其他语句。除了C里面传统的for-条件-递增循环，Swift还增加了for-in循环使得遍历数组，字典，范围，字符串或者其他序列都很简单。...
分类：
其他好文 时间：
2014-06-22 22:27:43
阅读次数：
391
