在spark yarn模式下跑yarn-client时出现无法初始化SparkContext错误. jdk1.7的时候，没有如下报错,但是java1.8出现 原因可能与yarn配置文件中 containers 的默认属性有关,被强制限定了物理内存 可以尝试中hadoop的conf下yarn.xml配 ...
分类：
其他好文 时间：
2017-09-27 19:02:43
阅读次数：
163
什么是堆Dump 堆Dump是反应Java堆使用情况的内存镜像，其中主要包括系统信息、虚拟机属性、完整的线程Dump、所有类和对象的状态等。 一般，在内存不足、GC异常等情况下，我们就会怀疑有内存泄露。这个时候我们就可以制作堆Dump来查看具体情况。分析原因。 基础知识 常见内存错误： jmap 用 ...
分类：
编程语言 时间：
2017-09-15 10:04:27
阅读次数：
359
恢复内容开始 常见内存错误 (1)内存分配(malloc, new)未成功，却使用了它。 解决方法:在使用内存之前检查指针是否为NULL (2)内存分配成功，但是没有初始化。在定义数组时养成赋0值的习惯。 (3)内存分配成功，也初始化了，操作越过了内存的边界。 (4)忘记释放内存，造成内存泄漏 (5 ...
分类：
其他好文 时间：
2017-09-02 01:08:38
阅读次数：
1091
内核的内存使用不像用户空间那样随意，内核的内存出现错误时也只有靠自己来解决（用户空间的内存错误可以抛给内核来解决）。 所有内核的内存管理必须要简洁而且高效。 主要内容： 内存的管理单元 获取内存的方法 获取高端内存 内核内存的分配方式 总结 1. 内存的管理单元 内存最基本的管理单元是页，同时按照内 ...
分类：
系统相关 时间：
2017-08-24 19:47:19
阅读次数：
203
声明：这一章开始的代码都是本人实际演示过的，按照本人的操作可以运行。程序并没有很强的健壮性，只能对正确的操作做出符合预期的响应。 整本书的代码文件、测试图片和程序运行exe请在这里下载：https://github.com/CaptainLYN/VCPictureProcessing 由于这本书我已 ...
分类：
其他好文 时间：
2017-08-12 21:23:17
阅读次数：
321
一、引言：永久代为什么被移出HotSpot JVM了？ 详见：JEP 122: Remove the Permanent Generation 原因主要有两个： 1、由于Permanent Generation内存经常不够用或发生内存泄露，引发恼人的java.lang.OutOfMemoryErro ...
分类：
其他好文 时间：
2017-07-26 18:05:19
阅读次数：
140
整体上来讲，oracle的坏块能够分为两种情景：物理损坏和逻辑损坏。物理损坏是因为存储等原因造成的，致使oracle在处理数据块时发现块的checksum不一致。逻辑损坏多是因为oracle的bug或者内存错误引起，通过检測数据块的checksum并不会发现什么问题，可是在逻辑上这些块已经发生了损坏 ...
分类：
数据库 时间：
2017-07-05 11:40:52
阅读次数：
242
学习C语言以来一直没有注意到细节的控制，敲代码总是“无所顾忌”的。如今慢慢把程序写大写复杂了。在资源宝贵和的嵌入式中。这个问题越来越须要注意了——内存的管理。。让编程慢慢走上正轨，慢慢走上可预见性吧，慢慢与机器融为一体，慢慢习惯于如梁肇新前辈所说以机器的思维方式思维吧！！！ 1、返回局部变量地址将引 ...
分类：
其他好文 时间：
2017-05-28 20:13:39
阅读次数：
177
操作系统复习 特点 编译器不能自动发现这类错误，通常是在程序运行时才能捕捉到 时隐时现，无明显症状 分类 1 内存分配未成功，却使用了它 起因 没有意识到内存分配会不成功 编程新手容易犯 解决对策 在使用内存之前，检查指针是否为空指针（NULL） char *p = (char *) malloc( ...
分类：
其他好文 时间：
2017-05-15 22:31:58
阅读次数：
148
常见的内存错误以及解决方案内存分配未成功，却使用了它： 常用解决办法是，在使用内存之前检查指针是否为NULL。如果指针p是函数的参数，那么在函数的入口处用assert(p!=NULL)进行检查。如果是用malloc或new来申请内存，应该用if(p==NULL) 或if(p!=NULL)进行防错处理... ...
分类：
其他好文 时间：
2017-05-01 20:59:17
阅读次数：
137
