码迷,mamicode.com
首页 > 其他好文 > 详细

数学之路-数据分析进阶-广义线性模型

时间:2014-12-06 00:10:49      阅读:269      评论:0      收藏:0      [点我收藏+]

标签:style   blog   http   io   ar   color   使用   sp   strong   

统计学上, 广义线性模型 (Generalized linear model) 是一种受到广泛应用的线性回归模式。此模式假设实验者所量测的随机变量的分布函数与实验中系统性效应(即非随机的效应)可经由一链结函数(link function)建立起可资解释其相关性的函数。

广义线性模型(generalized linear model, GLM)是简单最小二乘回归(OLS)的扩展,在广义线性模式中,假设每个资料的观测值bubuko.com,布布扣来自某个指数族分布。 该分布的平均数 bubuko.com,布布扣 可由与该点独立的X解释:

bubuko.com,布布扣

其中bubuko.com,布布扣bubuko.com,布布扣期望值bubuko.com,布布扣是由未知待估计参数bubuko.com,布布扣与已知变量bubuko.com,布布扣构成的线性估计式,bubuko.com,布布扣则为链结函数。

在此模式下,bubuko.com,布布扣的方差bubuko.com,布布扣可表示为:

bubuko.com,布布扣

一般假设bubuko.com,布布扣可视为一指数族随机变量函数

未知参数bubuko.com,布布扣通常会以最大概似估计量殆最大概似估计量, 或以贝氏方法来估计。

链结函数[编辑]

链结函数解释了线性预测子与分布期望值的关系。链结函数的选择可视情形而定。通常只要符合链结函数的值域有包含分布期望值的条件即可。

当使用具正则参数θ的分布时,链结函数需符合XTY 为β充份统计量此一条件。这在θ与线性预测子的链结函数值相等时方成立。下面列出若干指数族分布的典则链结函数及其反函数(有时称为均值函数):

典则链结函数
分布名称链结函数均值函数
正态恒等bubuko.com,布布扣bubuko.com,布布扣
指数倒数bubuko.com,布布扣bubuko.com,布布扣
Gamma
逆高斯二次倒数bubuko.com,布布扣bubuko.com,布布扣
泊松自然对数bubuko.com,布布扣bubuko.com,布布扣
二项式Logitbubuko.com,布布扣bubuko.com,布布扣
多项式

广义线性回归适合以下2种情况:

 1、因变量的条件平均数为回归参数的非线性函数
2、因变量为非正态分布的数据 
bubuko.com,布布扣

bubuko.com,布布扣

bubuko.com,布布扣

数学之路-数据分析进阶-广义线性模型

标签:style   blog   http   io   ar   color   使用   sp   strong   

原文地址:http://blog.csdn.net/myhaspl/article/details/41760581

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!