码迷,mamicode.com
首页 > 其他好文 > 详细

增强学习笔记 第九章 On-Policy预测的近似

时间:2017-10-05 22:40:10      阅读:250      评论:0      收藏:0      [点我收藏+]

标签:线性   线性规划   表格   无法   policy   空间   预测   网络   symbol   

对于状态空间太大的问题,表格类方法无法存储这么大的价值表,也没有办法穷尽这么多的状态。考虑到很多状态是相似的,知道一个状态的价值也就大概知道类似状态的价值,因此可以采用函数近似的方法,函数近似是监督学习的一个应用。

这一章我们主要做价值函数的近似。我们定义一个N维参数$\boldsymbol \theta$, N比状态数量小很多,$\theta$可以是线性规划的权重,也可以是神经网络的权重,还可以是决策树的分叉点。得到$v_{\pi}(s)\approx \hat v(s,\boldsymbol \theta)$

 

增强学习笔记 第九章 On-Policy预测的近似

标签:线性   线性规划   表格   无法   policy   空间   预测   网络   symbol   

原文地址:http://www.cnblogs.com/milaohu/p/7630143.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!