训练一个模型时大家都需要面对一个问题：参数优化。通常，我们做参数优化时都会先导出一个cost function，然后通过调整参数值来最大化或最小化这个cost function。这个过程听起来很简单，但真的做起来是个剧恶心的体力活！ 比方说你要用梯度方法做优化，得求一阶导二阶导吧，求得半死不活之后还 ...
分类：
其他好文 时间：
2018-07-04 22:53:54
阅读次数：
265
Spark程序优化所需要关注的几个关键点——最主要的是数据序列化和内存优化
分类：
其他好文 时间：
2018-07-03 18:09:59
阅读次数：
151
系统调优 优先级：0~139 1~99：实时优先级 100~139：动态优先级 CPU CPU隔离： vim /etc/grub.conf kernel ...... lsolcpus=cpu_number1,cpu_number2 ... 定义中断smp affinity: echo cpu_nu ...
分类：
其他好文 时间：
2018-06-26 01:01:36
阅读次数：
202
查看php-fpm的内存占用 1、查看php-fpm的进程个数 2、查看每个php-fpm占用的内存大小 3.查看PHP-FPM在你的机器上的平均内存占用 4.查看单个php-fpm进程消耗内存的明细 php-fpm的参数优化 对于内存大的服务器（比如8G以上）来说，指定静态的 max_childr ...
分类：
Web程序 时间：
2018-06-17 10:58:15
阅读次数：
188
本文主要讲解linux内核参数详细注解以及深入优化目录： 1.linux内核参数详解 2.生产环境下内核参数优化配置详解与参考一：linux内核参数详解以下表格中红色字体为常用优化参数下列文件所在目录：/proc/sys/net/ipv4/名称默认值建议值描述net.ipv4.tcp_syn_retries51对于一个新建连接，内核要发送多少个 SYN
分类：
系统相关 时间：
2018-06-07 10:23:00
阅读次数：
198
1按照官网步骤 https://redis.io/download 授权， 在客户端 reids 设置密码config set requirepass 123config get * 然后 按 ctr+c 退出./redis-cli -a 123 config get * 4.参数优化 https: ...
分类：
其他好文 时间：
2018-05-29 01:46:50
阅读次数：
146
内核相关参数(/etc/sysctl.conf) 以下参数可以直接放到sysctl.conf文件的末尾： net.core.somaxconn = 65535 net.core.netdev_max_backlog = 65535 net.ipv4.tcp_max_syn_backlog = 655 ...
分类：
其他好文 时间：
2018-05-17 19:15:28
阅读次数：
213
C/C++编译的程序所占用内存区域一般分为以下5个部分： （1）栈区（stack）：由编译器自动分配和释放，用来存放函数的参数、局部变量等。其操作方式类似于数据结构中的栈。 （2）堆区（heap）：一般由程序员分配和释放（通过malloc/free、new/delete），若程序员没有释放，则程序结 ...
分类：
编程语言 时间：
2018-05-17 12:02:19
阅读次数：
158
视图 什么是视图 视图就是通过查询得到一张虚拟表，然后保存下来，下次用的直接使用即可1、什么是视图 视图就是通过查询得到一张虚拟表，然后保存下来，下次用的直接使用即可 为什么要用视图 如果要频繁使用一张虚拟表，可以不用重复查询 如何创建视图 强调 1、在硬盘中，视图只有表结构文件，没有表数据文件 2 ...
分类：
其他好文 时间：
2018-05-15 00:34:39
阅读次数：
194
1.swap分区 swap作用是在系统内存不够的情况下，当做临时的内存使用。 swap是在硬盘上，性能肯定没有再内存好，当系统内存使用超过40%的时候， swap会可能被使用，而系统一旦使用swap会对磁盘带来很大负载，导致db服务器性能随之下降。 所以需要禁止系统使用swap空间 ...
分类：
数据库 时间：
2018-05-12 03:13:19
阅读次数：
194
