H.264中，4x4的像素块经过变换和量化之后，低频信号集中在左上角，大量高频信号集中在右下角。左边的低频信号相对数值较大，而右下角的大量高频信号都被量化成0、1和-1；变换量化后的残差信息有一定的统计特性和规律。 CAVLC（Context-based AdaptiveVariable-Le...
分类：
其他好文 时间：
2014-10-18 22:08:22
阅读次数：
282
在中文语言处理领域，一项重要的任务就是提取中文短语，也即固定多字词表达串的识别。短语提取经常用于搜索引擎的自动推荐，新词识别等领域。本文主要实现了从陌生文本中自动发现固定短语，并给出原理和步骤。测试数据算法工程师算法（Algorithm）是一系列解决问题的清晰指令，也就是说，能够对一定规范的输入，在...
分类：
其他好文 时间：
2014-10-18 13:56:35
阅读次数：
291
找了一些文章，感觉这篇是最好的，转载自：
最好的解释链接
KL散度常用于衡量两个概率分布之间的距离。根据香农定理，对一个概率分布
P(X) 进行最优编码方案编码的平均编码长度为：
也就是说，如果对于概率分布 P(X) 的的编码为最优编码方案时：
现假设在同样的字符集上，存在另一个概率分布 Q(X) ，如果用概率分布
P(X) 的最优编码来为符合分布 Q(X) 的字...
分类：
其他好文 时间：
2014-10-14 11:56:38
阅读次数：
242
近期在看一些熵相关的东西，为了了解一下互信息相关的东西，查阅了一些资料，有一个课件自己感觉写的不错，可是下载不下来，我就对它们进行了截图，希望对大家有帮助。这个课件中讲的内容比較基础，可是对于非通信、信息类的同学来说还是非常有帮助的，并且不仅通俗易懂，并且证明过程详尽，是不可多得的好材料。其重要包....
分类：
其他好文 时间：
2014-10-10 13:36:14
阅读次数：
107
近期在看一些熵相关的东西，为了了解一下互信息相关的东西，查阅了一些资料，有一个课件自己感觉写的不错，可是下载不下来，我就对它们进行了截图，希望对大家有帮助。这个课件中讲的内容比較基础，可是对于非通信、信息类的同学来说还是非常有帮助的，并且不仅通俗易懂，并且证明过程详尽，是不可多得的好材料。其重要包....
分类：
其他好文 时间：
2014-10-07 20:13:03
阅读次数：
196
Maximum Entropy Model(最大熵模型) 推导
分类：
其他好文 时间：
2014-09-30 14:26:29
阅读次数：
156
信用评分卡模型在国外是一种成熟的预测方法，尤其在信用风险评估以及金融风险控制领域更是得到了比较广泛的使用，其原理是将模型变量WOE编码方式离散化之后运用logistic回归模型进行的一种二分类变量的广义线性模型。
本文重点介绍模型变量WOE以及IV原理，为表述方便，本文将模型目标标量为1记为违约用户，对于目标变量为0记为正常用户；则WOE(weight
of Evidenc...
分类：
其他好文 时间：
2014-09-26 19:39:28
阅读次数：
430
熵的意义熵的概念起源于物理学的一个分支——热力学，我们可以先简单回顾一下著名的几个热力学定律：热力学第零定律：热平衡定律，若两个热力学系统均与第三个系统处于热平衡状态，此两个系统也必互相处于热平衡。热力学第一定律：能量守恒定律，即能量可以互相转化（比如机械能转化为电能），但不会凭空消失。热力学第二定...
分类：
其他好文 时间：
2014-09-25 14:13:19
阅读次数：
331
背景：ETC1图片格式的罪孽，不支持Alpha通道。于是程序员们将一些气力浪费在Alpha通道的处理上。 为了能使用ETC1，同时某些透明效果必须有Alpha通道，一般的处理方式是将RGB和Alpha分为两张图片分别储存。 只存Alpha通道的图片及RGB都为要存的Alpha值，因为熵比较小，图片尺寸也可以相应减小一些。
要做的工作：
1. 将带有Alpha通道的图片，另存为两张图片，一张只存...
分类：
其他好文 时间：
2014-09-22 17:28:53
阅读次数：
264
一、软件测试 大型软件系统的开发是一个很复杂的过程，其中因为人的因素而所产生的错误非常多，因此软件在开发过程必须要有相应的质量保证活动，而软件测试则是保证质量的关键措施。正像软件熵（software entrop...
分类：
编程语言 时间：
2014-09-22 14:59:03
阅读次数：
189
