参数服务器训练基本理论 参数服务器训练是分布式训练领域普遍采用的编程架构，主要解决以下两类问题： 模型参数过大：单机内存空间不足，需要采用分布式存储。 训练数据过多：单机训练太慢，需要加大训练节点,来提高并发训练速度。 如图所示，参数服务器主要包含Server和Worker两个部分，其中Server ...
分类：
其他好文 时间：
2021-02-16 11:42:24
阅读次数：
0
#OSI && TCP 学习目标 了解OSI七层模型分层结构 了解TCP/IP协议簇四层模型分层结构 能够说出TCP/IP协议簇中运输层、网络层和数据链路层常见的相关协议 能够说出TCP/IP的三次握手四次断开过程 了解Vmware的三种网络模式 能够使用客户端工具连接虚拟机 掌握主机名、DNS和静 ...
分类：
其他好文 时间：
2021-02-10 13:06:34
阅读次数：
0
1、CentOS 6 ①、修改防火墙配置文件vi /etc/sysconfig/iptables ②、添加要开启的端口 例如开放端口2888，则添加如下代码到下图红色方框中-A INPUT -m state --state NEW -m tcp -p tcp --dport 2888 -j ACCE ...
分类：
系统相关 时间：
2021-02-02 11:02:39
阅读次数：
0
某些路由器具有所谓的流量控制中具有“惩罚性限速”的功能：（例如）192.168.1.100在120秒内平均速率超过100KB/S，那么把该IP列入惩罚队列，惩罚队列速率是40KB/S. 其实，利用iptables的也可以实现类似的功能。脚本如下： iptables -t mangle -N LMT ...
分类：
其他好文 时间：
2021-02-02 11:00:48
阅读次数：
0
设置规则 iptables -A FORWARD -d 10.0.0.100 -m quota --quota 1024 -j ACCEPTiptables -A FORWARD -d 10.0.0.100 -j DROP 添加流量限制100G iptables -I FORWARD -d 10.0 ...
分类：
其他好文 时间：
2021-02-02 10:52:22
阅读次数：
0
什么是数据库缓存 数据库的数据都存储在磁盘中，在高并发场景下，业务应用对MySQL产生的增删改查操作造成巨大的IO开销和查询压力，这无疑对数据库和服务器都是一种巨大的压力，为了解决此类问题，缓存数据的概念应运而生。 常见的缓存形式：内存缓存、文件缓存。 极大地解决数据库服务器的压力 提高应用数据的响 ...
分类：
数据库 时间：
2021-02-02 10:49:49
阅读次数：
0
在开始本篇的内容前，我们先来思考几个问题。 我们先来看一段简单的代码： void func(int a) { if (a > 100000000) return; int arr[100] = {0}; func(a + 1);} 你能看出这段代码会有什么问题吗？ 我们在之前的文章《高性能高并发服务 ...
分类：
其他好文 时间：
2021-02-01 12:35:41
阅读次数：
0
概述 CountDownLatch 允许一个或多个线程等待直到在其他线程中执行的一组操作完成的同步辅助。简单来说，就是 CountDownLatch 内部维护了一个计数器，每个线程完成自己的操作之后都会将计数器减一，然后会在计数器的值变为 0 之前一直阻塞，直到计数器的值变为 0. 简单使用 这个例 ...
分类：
编程语言 时间：
2021-02-01 12:23:14
阅读次数：
0
什么是限流器？ 限流器是一种限制某种操作在一定时间内的执行次数（例如每秒钟5次）或者执行量（例如每秒钟1G大小的数据）的机制。 限流器是一种防御性的编程实现方式，在大数据量高并发访问时，经常会出现服务或接口面对暴涨的请求而不可用的情况，甚至引发连锁反映导致整个系统崩溃。此时你需要使用的技术手段之一就 ...
分类：
其他好文 时间：
2021-01-30 12:19:16
阅读次数：
0
目录 背景 目前，在工作中用到的分布式缓存技术主要是redis和memcached两种 缓存的目的是为了在高并发系统中有效的降低DB数据库的压力 缓存服务器的选型和特点 1.memcache服务器 memcache服务器是没有集群概念的。所有的存储分发全部交给memcache client去做，这里 ...
分类：
其他好文 时间：
2021-01-27 14:00:46
阅读次数：
0
