前期准备：准备三台CentOS7.2系统，每台机器三块硬盘，关闭selinux，关闭iptables，做好时间同步，做好本地域名解析,并对每台机器做互信。192.168.10.101ceph-node1192.168.10.22ceph-node2192.168.10.33ceph-node3没台机器上有三个osd，整个集群共九个osd。在每台机器上/etc/yum.repos.d/目录下创建ce
分类：
其他好文 时间：
2018-11-11 23:35:19
阅读次数：
247
1. 背景 近日项目要求基于爬取的影视评论信息，抽取影视的关键字信息。考虑到影视评论数据量较大，因此采用Spark处理框架。关键词提取的处理主要包含分词+算法抽取两部分。目前分词工具包较为主流的，包括哈工大的LTP以及HanLP，而关键词的抽取算法较多，包括TF-IDF、TextRank、互信息等。... ...
分类：
其他好文 时间：
2018-11-03 23:02:30
阅读次数：
657
SSO(单点登录)就是只需在一个登录认证服务下进行登录后，就可访问所有相互信任的应用。CAS是一个经典的SSO实现，它分服务端和客户端，服务端就是登录认证服务，客户端各个需要保护授权的应用，它的流程是： 假设分别有www.360kjh.com（简称www）、agent.360kjh.com（简称ag ...
分类：
其他好文 时间：
2018-10-13 18:18:16
阅读次数：
167
信息熵 熵度量了事物的不确定性，越不确定的事物，它的熵就越大。在没有外部环境的作用下，事物总是向着熵增大的方向发展，所以熵越大，可能性也越大。 $$ H(X)= \sum_{i=1}^np_{(i)}logp_{(i)} $$ 条件熵 X确定时，Y的不确定性度量。 在X发生是前提下，Y发生新带来的熵 ...
分类：
其他好文 时间：
2018-10-01 15:34:45
阅读次数：
272
两个随机变量的独立性表示两个变量X与Y是否有关系（贝叶斯可证），但是关系的强弱(mutual dependence)是无法表示的，为此我们引入了互信息。 其中 p(x,y) 是 X 和 Y 的联合概率分布函数，而p(x)和p(y)分别是 X 和 Y 的边缘概率分布函数。 在连续随机变量的情形下，求和 ...
分类：
其他好文 时间：
2018-09-22 00:58:02
阅读次数：
587
HCNA——动态路由协议基础动态路由协议路由协议是路由器之间交互信息的一种语言，路由器之间通过路由选择协议共享网络状态和网络可达性的一些信息。路由器依靠动态路由协议来传播和收集路由选择信息。路由协议定义了一套路由器与邻接路由器通信时使用的规则。动态计算路由，适应网络变化，找出本地路由器到网络中其它网段的路由。常见的动态路由协议有：RIP：RoutingInformationProtocol，路由信
分类：
其他好文 时间：
2018-09-20 22:57:43
阅读次数：
253
本文来自网易云社区 作者：邱晟 单点登录（Single Sign On），简称为 SSO，目前已经被大家所熟知。简单的说, 就是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。 举例: 我们可以使用corp邮箱的账号登录oa系统; 登录了网易通行证，就能够轻松在邮箱，云音乐等应 ...
分类：
其他好文 时间：
2018-09-18 13:48:43
阅读次数：
150
本文来自网易云社区 作者：邱晟 单点登录（Single Sign On），简称为 SSO，目前已经被大家所熟知。简单的说, 就是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。 举例: 我们可以使用corp邮箱的账号登录oa系统; 登录了网易通行证，就能够轻松在邮箱，云音乐等应 ...
分类：
其他好文 时间：
2018-09-18 13:47:31
阅读次数：
164
在学习 "使用sklearn做单机特征工程" 这篇文章时，发现在计算互信息时 代码运行出错 原文部分如下： 3.1.4 互信息法 经典的互信息也是评价 定性自变量 对 定性因变量 的相关性的，互信息计算公式如下： 为了处理定量数据，最大信息系数法被提出，使用feature_selection库的Se ...
