微服务架构的优势与不足 分布式、微服务、云架构,Spring,SpringMVC,Spring MVC+Mybatis,Dubbo+Zookeeper,Redis分布式缓存, 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 更多详细源码参考来源：http://minglis... ...
分类：
其他好文 时间：
2017-08-08 15:20:10
阅读次数：
264
spring和springmvc的区别 spring,springmvc,spring mvc,web开发,java分布式架构,shiro,mybatis,kafka,j2ee分布式架构, 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 更多详细源码参考来源：http://... ...
分类：
编程语言 时间：
2017-08-08 15:19:09
阅读次数：
165
30分钟学会如何使用Shiro spring,springmvc,spring mvc,web开发,java分布式架构,shiro,mybatis,kafka,j2ee分布式架构, 愿意了解框架技术或者源码的朋友直接求求交流分享技术：2042849237 更多详细源码参考来源：http://ming... ...
分类：
其他好文 时间：
2017-08-08 15:12:58
阅读次数：
152
为什么要了解点数学基础 学习大数据分布式计算时多少会涉及到机器学习的算法，所以理解一些机器学习基础，有助于理解大数据分布式计算系统（比如spark）的设计。机器学习中一个常见的就是gradient descent算法，是线性回归问题的一个基础算法。gradient是数学概念。 Gradient 如果 ...
分类：
编程语言 时间：
2017-08-08 13:58:53
阅读次数：
241
Spark开源的各模块组成结构： 1. Narrow dependency——窄依赖，子RDD依赖于父RDD中固定的data partition。 2. Stage——分为多个阶段进行作业。 3. Wide Dependency——宽依赖。子RDD对父RDD中的全部data partition依赖。 ...
分类：
其他好文 时间：
2017-08-08 12:38:45
阅读次数：
114
随着这次门户功能改造的深入，对各个功能模块有了更加深刻的认识，昨天在编码的过程中看到工程中引用的memcache缓存层流量管理工具：Mcrouter，结合原来了解到的Nginx在这里对这款Facebook的新产品的功能做一个介绍： 在去年的Data@Scale大会和USENIX的USENIX的NSD ...
分类：
系统相关 时间：
2017-08-08 10:46:14
阅读次数：
189
背景 Ceph简单介绍 Ceph是一个分布式存储，能够提供对象存储、块存储和文件存储，当中对象存储和块存储能够非常好地和各大云平台集成。一个Ceph集群中有Monitor节点、MDS节点（可选，用于文件存储）、至少两个OSD守护进程。 Ceph OSD：OSD守护进程，用于存储数据、处理数据拷贝、恢 ...
分类：
其他好文 时间：
2017-08-08 09:31:30
阅读次数：
365
Hadoop 2.x 部署 * Local Mode * Distributed Mode * 伪分布式 一台机器，运行所有的守护进程， 从节点DataNode、NodeManager * 完全分布式 有多个从节点 DataNodes NodeManagers 配置文件 $HADOOP_HOME/e ...
分类：
其他好文 时间：
2017-08-08 09:27:17
阅读次数：
171
副本放置策略CRUSH算法的设置目的是使数据能够根据设备的存储能力和宽带资源加权平均地分布，并保持一个相对的概率平衡。副本放置在具有层次结构的存储设备中，这对数据安全也有重要影响。通过反射系统的物理安装组织，CRUSH算法可以将系统模块化，从而定位潜在的设备故障。这..
分类：
其他好文 时间：
2017-08-08 00:42:46
阅读次数：
239
回归拟合是最基础的数据分析方法，而线性回归又是最基础的回归拟合。对于分布非常集中的数据，可以直接采用最小二乘法进行回归拟合。甚至，我们可以直接把数据放到excel表格中，使用excel直接进行拟合。然而，当数据中含有噪声的时候，必须采用新的算法过滤噪声点。 在此，介绍一种RANSAC(Random ...
分类：
其他好文 时间：
2017-08-08 00:37:38
阅读次数：
302
