Pytorch框架快速入门 前言 找数据定义、找model定义、(找损失函数、优化器定义)，主循环代码逻辑 Pytorch框架编写深度学习模型，无非就是按照四步，从这四步出发去剖析和书写代码，可以比较好的提高我们的效率。 基本思想和步骤 四大步骤 1、输入处理模块 (X 输入数据，变成网络能够处理的 ...
分类：
其他好文 时间：
2020-06-27 14:39:46
阅读次数：
69
矩阵求偏导的部分知识 资料原链接：https://blog.csdn.net/lirika_777/article/details/79646453 1.矩阵Y=F(x)对标量x求导 2.标量y对列向量x求导 x和a都是n*1的列向量 3.行向量y'对列向量x求导 ...
分类：
其他好文 时间：
2020-06-27 11:41:50
阅读次数：
59
背景 了解深度学习中的梯度爆炸与消失的原因，及如何处理梯度爆炸与消失。 梯度消失 梯度消失是激活函数和权重矩阵初始化值，这两个因素决定的。 sigmoid函数，求导的最大值为0.25 根据链式求导法则：导数小于0.25，如果初始化的W值，再小于1，这样逐个相乘后，会导致偏差为0，最终导致网路中的参数 ...
分类：
其他好文 时间：
2020-06-24 17:49:19
阅读次数：
48
1. 功能请求失效: 可能是链接为http请求,导致出现问题 2.浏览器网址左边出现黄色感叹号: 这是由于网页中存在http的图片链接,需要根据实际情况修改; 3.将网页内的http请求变为https: 一个办法是在 html代码 <head> 中 加入 <meta http-equiv="Cont ...
分类：
Web程序 时间：
2020-06-11 19:58:12
阅读次数：
77
wiki百科 tensorflow自动求导 矩阵计算两种布局（wiki的中文翻译） pytorch自动求导 ...
分类：
其他好文 时间：
2020-06-08 19:20:46
阅读次数：
48
TensorFlow 支持自动求导，可以使用 TensorFlow 优化器来计算和使用梯度。它使用梯度自动更新用变量定义的张量。本节将使用 TensorFlow 优化器来训练网络。前面章节中，我们定义了层、权重、损失、梯度以及通过梯度更新权重。用公式实现可以帮助我们更好地理解，但随着网络层数的增加， ...
分类：
其他好文 时间：
2020-06-08 18:52:30
阅读次数：
70
反向传播算法基于多元函数链式法则，以下记录多元函数链式法则的证明与反向传播算法的实例推演。 多元复合函数的求导法则（多元链式法则） 定义 如果函数$u=\varphi(t)$及$v=\psi(t)$都在点$t$可导，函数$z = f(u,v)$在对应点$(u,v)$具有连续偏导数（重点），那么复合函 ...
分类：
编程语言 时间：
2020-06-06 18:33:46
阅读次数：
49
例如：求e^(x+2y+3z)+xyz=1 求dz (可确定z=z(x,y)函数) 方法1：对两边求微分得 e^(x+2y+3z)d(x+2y+3z)+d(xyz)=0 该方法使用了微分形式得不变性,也就是说此时这个式子在求微分的时候不用管谁是谁得函数，将自变量和应变量一视同仁，看作是平等的量 为了 ...
分类：
其他好文 时间：
2020-06-03 17:19:21
阅读次数：
179
正规矩阵 矩阵的迹以及行列式 伴随矩阵 矩阵的逆 对角矩阵 矩阵求导 ...
分类：
其他好文 时间：
2020-05-31 00:52:47
阅读次数：
59
过去二十年，数字经济蓬勃发展，深刻改变了人们的生产和生活方式。数据已经成为数字经济时代最核心的生产要素。移动互联网成为社会的数字基础设施，社交网络、电子商务、移动支付已经重构每一个中国人的生活方式，人工智能在各行业的应用持续拓展和深化，有望成为新一代的技术基础设施。工业互联网已在千行百业生根发芽，赋能工业企业实现数字化转型，通过对数据的采集和分析形成智能反馈，推动形成全新的生产制造和服务体系，提高
分类：
其他好文 时间：
2020-05-22 17:14:10
阅读次数：
71
