码迷,mamicode.com
首页 > 其他好文 > 详细

PyTorch 1.0 中文文档:torch.nn.init

时间:2019-02-17 19:10:05      阅读:216      评论:0      收藏:0      [点我收藏+]

标签:tab   master   github   nal   gen   pac   The   alc   初始化   

译者:GeneZC

torch.nn.init.calculate_gain(nonlinearity, param=None)

返回给定非线性函数的推荐的增益值。对应关系如下表:

非线性函数 增益
Linear / Identity
Conv{1,2,3}D
Sigmoid
Tanh
ReLU
Leaky Relu

参数:

  • nonlinearity – 非线性函数 (nn.functional 中的名字)
  • param – 对应非线性函数的可选参数

例子

>>> gain = nn.init.calculate_gain(‘leaky_relu‘)
torch.nn.init.uniform_(tensor, a=0, b=1)

用均匀分布 初始化输入 Tensor

阅读全文/改进本文

PyTorch 1.0 中文文档:torch.nn.init

标签:tab   master   github   nal   gen   pac   The   alc   初始化   

原文地址:https://www.cnblogs.com/wizardforcel/p/10392208.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!