dfs.datanode.handler.count默认为3,大集群可以调整为10 传统MapReduce和yarn对比 如果服务器物理内存128G,则容器内存建议为100比较合理 配置总量时考虑系统调优块,双路四核2*4*2=16g,则总量设置为10到12比较合适,需要预留空间给其他服务器 需要给 ...
分类:
其他好文 时间:
2017-11-01 16:27:00
阅读次数:
142
1.关闭SELinux 2.设定运行级别为3 3.精简开机自启动 4.关闭iptables防火墙 5.修改SSH服务端远程登录配置 6.利用sudo控制用户管理权限 7.调整字符集 8.设置时间同步 9.设置历史记录和登录超时 10.设置文件描述符的数量 在编写文件操作的或者网络通信的软件时,初学者 ...
分类:
系统相关 时间:
2017-10-16 13:50:51
阅读次数:
300
转至:http://blog.csdn.net/iter_zc/article/details/41746265 最近时间比较紧张,要写的东西也有很多,只能想到一点写一点。关于GC,网上的资料太多,之前对一个系统调优的时候又回顾了一下,找了几篇广泛流传的资料,大部分都是大同小异,这里总个总结,希望能 ...
分类:
其他好文 时间:
2017-08-29 22:57:45
阅读次数:
159
系统调优4大子系统 实战1:找出系统中使用CPU最多的进程? 实战2:找出系统中使用内存最多的进程? 实战3:找出系统中对磁盘读写最多的进程? 实战4:找出系统中使用网络最多的进程? 系统调优概述: 1、系统的运行状况:CPU->MEM->DISK*->NETWORK->应用程序调优 性能优化的4个 ...
分类:
系统相关 时间:
2017-07-26 17:43:01
阅读次数:
166
MySQL数据库调优主要有七个方面: 1.硬件优化 2.数据库设计规划 3.数据的应用 4.磁盘的IO优化 5.操作系统的优化,内核、TCP连接数量 6.MySQL服务优化 7.my.cnf 参数优化 ...
分类:
数据库 时间:
2017-07-06 20:40:46
阅读次数:
161
1,用户最大进程数配置Centos5环境修改/etc/security/limits.conf文件Centos6环境修改/etc/security/limits.d/90-nproc.conf文件root@mysql:/data/tools/db#vim/etc/security/limits.conf*softnofile65535
*softnproc65535
*hardnofile65535
*hardnproc65535root@mysql:/data/t..
分类:
系统相关 时间:
2017-06-15 22:43:51
阅读次数:
219
MySQL是一个强大的开源数据库。随着MySQL上的应用越来越多,MySQL逐渐遇到了瓶颈。这里提供 101 条优化 MySQL 的建议。有些技巧适合特定的安装环境,但是思路是相通的。我已经将它们分成了几类以帮助你理解。 MySQL监控 MySQL服务器硬件和OS(操作系统)调优: 1、有足够的物理 ...
分类:
数据库 时间:
2017-06-14 22:21:23
阅读次数:
261
前面说到过select/poll/epoll这三个系统调用,我们都知道,Unix/Linux下把所有的设备都当成文件来进行I/O,所以,那三个操作更应该算是I/O相关的系统调用。说到I/O模型,这对于我们的I/O性能相当重要,我们知道,Unix/Linux经典的I/O方式是(关于Linux下的I/O ...
分类:
其他好文 时间:
2017-06-09 23:43:42
阅读次数:
353
内存查看 查看内存是否存在瓶颈,使用top指令看比较麻烦,而free命令更为直观: [/home/weber#]free total used free shared buffers cached Mem: 501820 452028 49792 37064 5056 136732 -/+ buff ...
分类:
其他好文 时间:
2017-04-16 18:54:07
阅读次数:
268
Centos6.6安装后优化方案转至元数据结尾创建:王红立于九月24,2015转至元数据起始1.系统安装后,启动网卡。默认为DHCP方式获取IP。实际环境中需要更改为static。配置信息如下:DEVICE=eth0#网卡设备名称HWADDR=00:50:56:AF:11:2A#物理地址TYPE=Ethernet#网络类型为以太网模式UU..
分类:
其他好文 时间:
2017-03-13 22:37:43
阅读次数:
281