本文主要研究了分布式强化学习，利用价值分布(value distribution)的思想，求出回报$Z$的概率分布，从而取代期望值(即$Q$值)。 Q-Learning Q-Learning的目标是近似Q函数，即在策略$\pi$下回报$Z_t$的期望值： \(Q^{\pi}(s,a)=\mathbb ...
分类：
其他好文 时间：
2020-11-06 01:12:19
阅读次数：
18
我们对DHCP的常见理解是，为主机动态的分配IP地址，减少手工配置，不用担心ip冲突。 下面是我对DHCP的一些理解。 DHCP用的是UDP协议，DHCP服务器监听的端口号是67，DHCP客户端发送请求时用的是68端口。 下面是DHCP客户端请求IP的过程： 1. 客户端使用0.0.0.0地址，以广 ...
分类：
其他好文 时间：
2020-11-06 01:11:55
阅读次数：
13
题意简述 有一个$k$维空间，每维的跨度为$L$，即每一维的坐标只能是$0,1, \cdots ,L-1$。每一步你可以移动到任意一个曼哈顿距离到自己小于等于$d$的任意一个合法坐标。求一条空间中合法的哈密顿路。即，找一条经过且仅经过空间中每一个点一次的路径。 子任务编号 分值 k= L= d= 1 ...
分类：
其他好文 时间：
2020-11-06 01:11:40
阅读次数：
12
#1.celery介绍 https://www.cnblogs.com/xiaonq/p/11166235.html#i1 ##1.1 celery应用举例 Celery 是一个 基于python开发的 分布式异步消息任务队列 ，通过它可以轻松的实现任务的异步处 理，如果你的业务场景中需要用到异步任 ...
分类：
其他好文 时间：
2020-11-06 01:11:19
阅读次数：
11
手把手带你使用 go-kit go-kit 是什么 Go kit 是一个微服务工具包集合。利用它提供的额API和规范可以创建健壮、可维护性高的微服务体系 Go-kit的三层架构 1、Service 这里就是我们的业务类、接口等相关信息存放 2、EndPoint 定义Request、Response格 ...
分类：
其他好文 时间：
2020-11-06 01:11:03
阅读次数：
20
题解：递归求左右子树的最大深度。 /** * Definition for a binary tree node. * public class TreeNode { * int val; * TreeNode left; * TreeNode right; * TreeNode(int x) { ...
分类：
其他好文 时间：
2020-11-06 01:10:43
阅读次数：
21
引言上周有个小伙伴问我有没有个人博客，想和我互换一个友链。我以前也想过要自己搭个博客，但是一直迟迟没有行动，一般写了文章就往其他平台发一下就完事了。想了想为啥自己没有搭建一个属于自己的博客？一来的话可能嫌麻烦，需要往自己的博客平台发布，平时一些第三方博客平台的话都懒得发了，二来的话还要买服务器和域名一般的配置一年也得几百大洋。所以一直没有搭建一个属于自己的博客。但是现在作为一个自媒体的时代，许多程
分类：
其他好文 时间：
2020-11-06 01:10:29
阅读次数：
20
背景最近端午好久没有和二胖聚一聚了，于是约了二胖到人民广场去宰他一顿，正好最近他跳槽加薪了。<br/>我：二胖听说你最近跳槽了，并且还是从传统软件公司跳到了互联网公司，工资是不是涨了一点啊，今天你请客哈。<br/>二胖：别说了，工资是涨了点，但是性价比反而变低了，以前到点就下班，现在下班到家都快12点了。<br/>我：新公司怎么样还适应吗？除了上班时间久点。&l
分类：
其他好文 时间：
2020-11-06 01:10:09
阅读次数：
20
1.网落层中最常见的通信模型：(可靠双向字节流)万维网：c/s模型BitTorrent：点对点模型大量客户端打开与每个客户端连接，其他交换数据SkyType:中继服务器（eg微信聊天）2.数据包交换的两个主要优点1.他使交换很简单，因为他们不需要了解数据包流2.可以使我们共享链接的许多流之间有效的共享容量3.分层的意义简单的c代码经过的步骤：源代码->编译器(词法分析解释代码预处理声明以及代
分类：
其他好文 时间：
2020-11-06 01:09:05
阅读次数：
18
知乎HBase实践前言HBase是一个基于Hadoop面向列的非关系型分布式数据库(NoSQL),设计概念来源于谷歌的BigTable模型，面向实时读写、随机访问大规模数据集的场景，是一个高可靠性、高性能、高伸缩的分布式存储系统，在大数据相关领域应用广泛.HBase系统支持对所存储的数据进行透明切分，从而使得系统的存储以及计算具有良好的水平扩展性.知乎从2017年起开始逐渐采用HBase系统存储各
分类：
其他好文 时间：
2020-11-06 01:07:32
阅读次数：
22
Redis作者：近期核心功能的一些思考和澄清导读：本文为Redis作者Antirez就重点功能的发展方向做出澄清，并表明“Redis没有一个可靠的路线图，多年来我发现走一步看一步才是优秀的路线图”，阅读此文，关注Redis功能研发方向。昨天有位Redis的用户在HackerNews上做了以下评论：虽然我喜欢Redis，但我对目前正在开发的一些功能持怀疑态度。respv3协议中的一些功能，虽然听起来
分类：
其他好文 时间：
2020-11-06 01:07:13
阅读次数：
13
历时三年，美图全面容器化踩过的坑导读：本文由分享演讲整理而成。通过围绕美图业务和大家分享下美图容器基础平台建设中的探索经验以及在业务落地过程中的具体问题和相应的方案。美图从2016年开始了容器相关的探索到2018年业务基本实现容器化，期间遇见的一些坑，同时也产生了相应的解决方案，希望对大家有一定的借鉴意义。章敏鹏，目前就职于美图技术保障部架构平台，主要从事容器基础平台建设，流媒体体系相关建设。负责
分类：
其他好文 时间：
2020-11-06 01:06:16
阅读次数：
18
项目管理(PJM)与SageX3ERP的集成应用PJM和SageX3ERP的各个功能模块集成Sagex3PJM与SageX3的客户关系管理(CRM)、销售、采购、制造和财务等核心功能领域完全集成。图1PJM与SageX3无缝集成PJM和各个业务模块的无缝集成2.1销售：PJM流程使用与项目结构关联标准的销售功能。图2PJM销售管理流程图3项目管理与标准模块的无缝集成同时它添加了两个新的特征来帮助销
分类：
其他好文 时间：
2020-11-06 01:05:36
阅读次数：
17
2PC之踵？是时候升级二阶段提交协议了两阶段提交协议（2PC）已经在企业软件系统中使用了三十多年。它是一种非常有影响力的协议，用于确保访问多个分区或分片中的数据的事务的原子性和持久性。它无处不在-无论是在旧的“古老的”分布式系统、数据库系统和文件系统，如Oracle，IBMDB2，PostgreSQL和MicrosoftTxF（支持事务的NTFS）还是在较年轻的“千禧”系统如MariaDB、Tok
分类：
其他好文 时间：
2020-11-06 01:05:12
阅读次数：
16
架构师口中的混沌工程，究竟用来解决什么问题导读：混沌工程，翻译自国外的ChaosEngineering，在Netflix以及最近的一些技术大会得到了广泛关注，本文介绍了混沌工程的一些基本原理。Netflix不仅是一家互联网视频平台，它也提出了一系列混沌工程的基本原则。混沌工程这个词可能听起来不是那么清晰，但它实际上是一种提高技术架构弹性能力的复杂技术手段。这篇文章旨在解释混沌工程是什么以及它是如何
分类：
其他好文 时间：
2020-11-06 01:04:46
阅读次数：
14
案例分享：巧用各种工具提升无源码系统的性能和稳定性导读：在没有核心系统源码的情况下，修改源码打印耗时的方法无法使用，通过tcpdump、wireshark、gdb、010editor、火焰图、ida、数据库抓sql耗时语句、oracleash报告、loadrunner等工具找到了服务器tps上不去，C程序进程随机挂掉的问题，并顺利解决，收获颇多。杨振，宜信工程师，前微博feed组工程师，对源码学习
分类：
其他好文 时间：
2020-11-06 01:04:02
阅读次数：
16
SYSLOGSYSLOG（日志）系统中的大部分日志都是通过一种叫做syslog的机制产生和维护的。syslog是一种标准的协议，基于UDP，端口号514。syslog分为客户端和服务器端，客户端是产生日志消息的一方，而服务器端负责接收客户端发送来的日志消息。syslog日志消息既可以记录在本地（console、tty、buffer），也可以通过网络发送到syslog服务器。syslog服务器可以对
分类：
其他好文 时间：
2020-11-06 01:03:18
阅读次数：
19
