第四章 数值计算(numerical calculation)和第五章 机器学习基础下去自己看。 一、深度前馈网络(Deep Feedfarward Network,DFN)概要: DFN:深度前馈网络,或前馈神经网络(FFN)/多层感知机(MLP) 目标:近似模拟某函数f y=f(x;θ) 学习参 ...
分类:
其他好文 时间:
2018-04-01 16:05:10
阅读次数:
546
TensorFlow训练神经网络的4个步骤: 1、定义算法公式,即训练神经网络的forward时的计算 2、定义损失函数和选择优化器来优化loss 3、训练步骤 4、对模型进行准确率评测 附Multi-Layer Perceptron代码: 1 from tensorflow.examples.tu ...
分类:
其他好文 时间:
2018-03-06 21:47:21
阅读次数:
147
WassersteinGAN源码 作者的代码包括两部分:models包下包含dcgan.py和mlp.py, 这两个py文件是两种不同的网络结构,在dcgan.py中判别器和生成器都含有卷积网络,而mlp.py中判别器和生成器都只是全连接。 此外main.py为主函数,通过引入import mode ...
分类:
其他好文 时间:
2018-03-03 21:23:32
阅读次数:
4508
人工神经网络在肺结核诊断中应用的研究进展 $a_i$ 作者:胡青云 指导老师:杭诚方、李舰 摘要: 结核病是一种全世界致死率极高的传染性疾病,转染性极强,可通过空气传播。该病在亚洲和非洲发病率极高,尤其是在大多数低收入国家。对该病的诊断,有研究采用多层感知器(MLP)和启发式自适应共振原理,提出了基 ...
分类:
其他好文 时间:
2017-12-31 18:35:22
阅读次数:
203
激活函数是用来加入非线性因素的,解决线性模型所不能解决的问题。 激活函数通常有如下一些性质: 非线性: 当激活函数是线性的时候,一个两层的神经网络就可以逼近基本上所有的函数了。但是,如果激活函数是恒等激活函数的时候(即f(x)=x),就不满足这个性质了,而且如果MLP使用的是恒等激活函数,那么其实整 ...
分类:
其他好文 时间:
2017-12-24 13:42:32
阅读次数:
155
无论在 FPGA 还是 ASIC 设计,无论针对 CNN 还是 LSTM 与 MLP,无论应用在嵌入式终端还是云端(TPU1),其构架的**核心都是解决带宽问题**。不解决带宽问题,空有计算能力,利用率却提不上来。 ...
分类:
其他好文 时间:
2017-11-15 21:46:55
阅读次数:
249
require('nn') local function createQNetwork() local mlp = nn.Sequential() mlp:add(nn.Reshape(10)) mlp:add(nn.Linear(10, 32)) mlp:add(nn.Sigmoid()) mlp... ...
分类:
其他好文 时间:
2017-10-30 14:26:38
阅读次数:
156
前言: CNN作为DL中最成功的模型之一,有必要对其更进一步研究它。虽然在前面的博文Stacked CNN简单介绍中有大概介绍过CNN的使用,不过那是有个前提的:CNN中的参数必须已提前学习好。而本文的主要目的是介绍CNN参数在使用bp算法时该怎么训练,毕竟CNN中有卷积层和下采样层,虽然和MLP的 ...
分类:
其他好文 时间:
2017-09-21 11:28:24
阅读次数:
280
双向循环神经网络(Bidirectional Recurrent Neural Networks,Bi-RNN),Schuster、Paliwal,1997年首次提出,和LSTM同年。Bi-RNN,增加RNN可利用信息。普通MLP,数据长度有限制。RNN,可以处理不固定长度时序数据,无法利用历史输入 ...
分类:
其他好文 时间:
2017-08-12 11:44:35
阅读次数:
449