今天主要学习了利用torch中的nn模块定义 类,下面的代码包含对于模型类的构建以及参数访问,简便的可以使用‘net = nn.Sequential(NestMLP(), nn.Linear(30, 20), FancyMLP())’构建模型,默认进行初始化。 输出结果 输出结果 嵌套调用Fancy ...
分类:
其他好文 时间:
2020-03-11 12:27:29
阅读次数:
78
本文首先回顾了一些传统的激活函数和注意力机制,然后解读了一种“注意力机制下的激活函数”,也就是自适应参数化修正线性单元(Adaptively Parametric Rectifier Linear Unit,APReLU)。 1. 激活函数 激活函数是目前人工神经网络的核心组成部分之一,其作用是进行 ...
分类:
其他好文 时间:
2020-03-10 01:26:41
阅读次数:
72
本文首先盘点了传统的激活函数以及注意力机制,然后解读了一种“注意力机制下的新型激活函数”,也就是自适应参数化修正线性单元(Adaptively Parametric Rectifier Linear Unit,APReLU)。 1. 激活函数 激活函数是现代人工神经网络的核心组成部分,其用处是进行人 ...
分类:
其他好文 时间:
2020-03-09 13:28:32
阅读次数:
53
一.线性回归实现总结 手动实现线性回归,损失函数,梯度下降优化函数 线性回归是神经网络的基石,每一个神经元都可以看作是一个线性回归 https://www.cnblogs.com/xieviki650/p/ML_Linear-regression.html 推荐李宏毅老师的机器学习视频,结合视频和作 ...
分类:
其他好文 时间:
2020-03-08 19:46:48
阅读次数:
79
一、概念 CART全称叫Classification and Regression Tree。首先要强调的是CART假设决策树是二叉树,内部结点特征的取值只有“是”和“否”,左分支是取值为“是”的分支,有分支则相反。这样的决策树等价于递归地二分每个特征。 二、CART生成 决策树的生成就是递归地构建 ...
分类:
其他好文 时间:
2020-03-05 19:18:12
阅读次数:
343
关于时间序列预测 你可能经常会遇到这样的问题,给你一个数据集,要你预测下一个时刻的值是多少?如下图所示,这种数据往往并没有规律可言,也不可能用一个简单的n阶模型去拟合。老实说,以前我遇到这种问题都是直接上灰色模型,但是用的多了就感觉会有点问题。其它还有一些模型比方说ARAM、ARIRM我没有试过。这 ...
分类:
其他好文 时间:
2020-03-04 23:16:56
阅读次数:
78
线性表(Linear List) 顺序存储结构 顺序表(Sequence List) 顺序栈(Sequence Stack) 循环队列(Circular Queue) 链式存储结构 单链表(Singly Linked List) 双链表(Doubly Linked List) 循环链表(Circul ...
分类:
编程语言 时间:
2020-03-04 00:14:43
阅读次数:
76
本文主要对 Spark ML库下模型评估指标的讲解,以下代码均以 进行讲解,Spark版本为 。模型评估指标位于包 下。 模型评估指标是指测试集的评估指标,而不是训练集的评估指标 1、回归评估指标 RegressionEvaluator Evaluator for regression, which ...
分类:
其他好文 时间:
2020-03-03 22:38:09
阅读次数:
144
线性表(linear list) 线性表是n个类型相同数据元素的有限序列,通常记作(a0,a1,...ai-1,ai,ai+1)。 1.相同数据类型 在线性表的定义中,从a0到ai+1的n个数据元素是具有相同属性的元素。 比如说可以都是数字,如(23,14,5,11); 也可以是字符,如(A,B,C ...
分类:
其他好文 时间:
2020-03-03 20:32:12
阅读次数:
69
Rotation: Provided a vector $\vec{S}$,considering rotating the orthogonal base vectors $\{\hat{e_1},\hat{e_2},\hat{e_3}\}$ into new orthogonal base ve ...
分类:
其他好文 时间:
2020-03-02 12:50:38
阅读次数:
55