内存子系统及常用调优参数内存子系统组件slaballocatorbuddysystemkswapdpdflushmmu虚拟化环境:PA(进程地址)-->HA(虚拟机地址)-->MA(物理机地址)虚拟机转换:PA-->HAguestOS虚拟机内核,OS物理机内核shadowPTMemory:TLB:提升性能HugePages内存大页面[root@localho..
分类:
系统相关 时间:
2017-06-06 18:51:59
阅读次数:
386
java -server -Xms1024m -Xmx2048m -XX:+UseParallelGC -XX:+UseG1GC -XX:ParallelGCThreads=4 -XX:+UseParallelOldGC -XX:+UseAdaptiveSizePolicy -Xms:初始堆大小 - ...
分类:
编程语言 时间:
2017-04-28 20:12:03
阅读次数:
206
hbase性能调优 标签: hbase 性能调优 | 发表时间:2014-05-17 15:10 | 作者:无尘道长 分享到: 出处:http://www.iteye.com 分享到: 一、服务端调优 1、参数配置 1)、hbase.regionserver.handler.count:该设置决定了 ...
分类:
其他好文 时间:
2017-03-23 20:01:42
阅读次数:
141
前言 最近在看neo4j相关的官网文档以及一些调优参数,同时也学了下Jmeter,为了测试下neo4j服务的性能,虽然不是专业搞测试的,但是我觉得每个优秀的开发者都应该学会主动压测自己服务和代码的性能,并非写完代码之后直接扔给测试就完事了,兵法云:知彼知己,才能百胜不殆嘛。 jmeter是什么 jm ...
分类:
其他好文 时间:
2016-12-06 20:21:02
阅读次数:
160
1、代码中尽量避免group by函数,如果需要数据聚合,group形式的为rdd.map(x=>(x.chatAt(0),x)).groupbyKey().mapValues((x=>x.toSet.size)).collection() 改为 rdd.map(x=>(x.chatAt(0),x) ...
分类:
其他好文 时间:
2016-11-14 07:45:30
阅读次数:
462
lower_case_table_names=1#不区分大小写
skip-name-resolve#禁用dns解析
character-set-server=utf8
wait_timeout=1800
interactive_timeout=288000
max_allowed_packet=1000M
max_connections=3000
character-set-server=utf8
innodb_buffer_pool_size=1000M
innodb_additiona..
分类:
数据库 时间:
2016-09-07 11:04:11
阅读次数:
246
1、write-behind(默认on)glustervolumesettankwrite-behindonWriteBehindTranslator(后写)通常情况下,写操作会比读要慢。通过使用"aggregatedbackgroundwrite"技术,write-behindtranslator相当显著地改善了写的性能。更确切地说,大量小的写操作被集中起来,形成少量的、..
分类:
其他好文 时间:
2016-08-14 22:31:07
阅读次数:
2187
shuffle调优参数 new SparkConf().set("spark.shuffle.consolidateFiles", "true") spark.shuffle.consolidateFiles:是否开启shuffle block file的合并,默认为false//设置从maPart ...
分类:
其他好文 时间:
2016-07-13 20:42:37
阅读次数:
127
java -server -Xmx10g -Xms10g -Xmn4g -XX:PermSize=128M -XX:MaxPermSize=384m -XX:MaxTenuringThreshold=6 -XX:+HeapDumpOnOutOfMemoryError -XX:CMSMaxAborta ...
分类:
其他好文 时间:
2016-07-06 11:46:28
阅读次数:
167