这是一篇科普性质的文章，希望能过用一个通俗易懂的例子给非计算机专业背景的朋友讲清楚大数据分布式计算技术。大数据技术虽然包含存储、计算和分析等一系列庞杂的技术，但分布式计算一直是其核心，想要了解大数据技术，不妨从MapReduce分布式计算模型开始。该理论模型并不是什么新理念，早在2004年就被Goo ...
分类：
其他好文 时间：
2019-10-24 09:50:17
阅读次数：
112
它主要用于反映原始数据分布的特征，还可以进行多组数据分布特征的比较 如何利用Python绘制箱型图 需要的import的包 该函数是绘制多箱型图，且数据长度不一致的情况，input_dict = {filename1:[a1,a2,...,an],filename2:[b1,b2,...,bn].. ...
分类：
编程语言 时间：
2019-10-22 15:34:17
阅读次数：
124
批标准化（batch normalization,BN）是为了克服神经网络层数加深导致难以训练而产生的。统计机器学习中的ICS理论（Internal Covariate Shift）理论：源域和目标域的数据分布是一样的。即训练数据和测试数据是满足相同分布的。Covariate Shift是指训练集的... ...
分类：
其他好文 时间：
2019-10-21 13:27:59
阅读次数：
93
主要介绍：复制功能介绍、mysql二进制日志、mysql复制拓扑、高可用框架、单点故障、读写分离和负载均衡介绍等mysql复制功能提供分担读负载复制解决的问题实现在不同服务器上的数据分布利用二进制日志增量进行不需要太多的带宽但是使用基于行的复制在进行大批量的更改时会对带宽带来一定得压力，特别是跨ID... ...
分类：
数据库 时间：
2019-10-18 15:54:22
阅读次数：
130
参考资料：https://zhuanlan.zhihu.com/p/33173246?utm_source=wechat_session&utm_medium=social&utm_oi=611573545537507328 一般使用bn的话，对于模型的初始化要求没那么高，但是最终的结果可能没那么好 ...
分类：
其他好文 时间：
2019-10-18 00:00:51
阅读次数：
137
特征提取（特征变换） 从一组已有的特征通过一定的数学运算得到一组新特征 数据降维： PCA：方差 LDA： 均值 两者都假设数据分布是高斯分布 Ref. 《模式识别(第三版)》张学工 ...
分类：
其他好文 时间：
2019-10-07 19:44:22
阅读次数：
75
1、set和map的区别 都是关联式容器，底层都是红黑树。 set不允许重复的键值，所有元素自动排序，不能通过迭代器改变set的值，因为set的值就是键。 map不允许重复的键，所有元素都是键值对的方式存在的的，所有元素都是通过键来排序的。map的key不能修改，value能修改。 2、class和 ...
分类：
编程语言 时间：
2019-10-01 22:22:39
阅读次数：
149
深度神经网络难训练一个一个重要的原因就是深度神经网络涉及很多层的叠加，每一层的参数变化都会导致下一层输入数据分布的变化，随着层数的增加，高层输入数据分布变化会非常剧烈，这就使得高层需要不断适应低层的参数更新。为了训练好模型，我们需要谨慎初始化网络权重，调整学习率等。 原理分析 为了解决这个问题，一个 ...
分类：
其他好文 时间：
2019-09-22 10:38:06
阅读次数：
81
HBase HBas是Hadoop数据库，是一个分布式，可扩展的大数据存储。 当您需要对大数据进行随机，实时读/写访问时，请使用HBase。该项目的目标是托管非常大的表 - 数十亿行X百万列 - 在商品硬件集群上。HBase是一个开源的，分布式的，版本化的非关系数据库，结构化数据分布式存储系统。正如 ...
分类：
其他好文 时间：
2019-09-13 15:26:51
阅读次数：
91
本次使用木东居士提供数据案例，验证数据分布等内容，参考链接：https://www.jianshu.com/p/6522cd0f4278，先感谢上面两位。 只贴了代码。。。结果图片没得了 ...
分类：
编程语言 时间：
2019-09-01 23:35:39
阅读次数：
115
