2011年，Twitter发布了开源的分布式流计算系统Storm。四年后，随着用户数量的急剧增加，Twitter每天要处理的事件已经增加到十亿以上。Storm系统应对如此庞大而复杂多样的流数据变得十分困难。为了解决该问题，Twitter公司近期开发了一套全新的流处理系统——Heron。近日，Twit ...
分类：
其他好文 时间：
2017-02-15 14:49:50
阅读次数：
205
本文以Newton版本为例。 1.Magnum简介 Magnum项目通过Openstack API能够在Openstack中创建基于容器的服务，但它本身并不直接对容器进行操作，而是通过Kubernetes, Swarm或者Mesos后端进行管理。Openstack正式项目Zun具有直接管理docke ...
分类：
其他好文 时间：
2017-02-11 21:36:23
阅读次数：
326
Træf?k is a modern HTTP reverse proxy and load balancer made to deploy microservices with ease. It supports several backends (Docker, Swarm, Mesos/Mar... ...
分类：
其他好文 时间：
2017-02-11 19:49:17
阅读次数：
438
一：介绍 1.Spark的模式 Local：本地运行模式，主要用于开发、测试 Standalone：使用Spark自带的资源管理框架运行Spark程序，30%左右 Yarn: 将spark应用程序运行在yarn上，绝大多数使用情况，60%左右 Mesos： 二：安装 1.解压 2.建立软连接 3.复 ...
分类：
其他好文 时间：
2017-02-05 23:03:47
阅读次数：
549
参考赵班长的unixhot以及马亮blog 笔者QQ：572891887 Linux架构交流群：471443208 1.1Mesos简介 Mesos是Apache下的开源分布式资源管理框架，它被称为分布式系统的内核。Mesos最初是由加州大学伯克利分校的AMPLab开发，后在Twitter得到广泛使 ...
分类：
其他好文 时间：
2017-01-23 16:40:18
阅读次数：
392
参考文章：http://www.xuliangwei.com/xubusi/422.htmlhttps://open.mesosphere.com/getting-started/install/#master-setuphttps://www.digitalocean.com/community/tutorials/how-to-configure-a-production-ready-mesosphere-cluster-on-ubuntu-14-04安装环境：3台server192..
分类：
其他好文 时间：
2017-01-19 13:13:17
阅读次数：
668
ubernetes是容器编排和调度领域的王者，它击败了竞争对手Docker Swarm和Apache Mesos，开启了闪耀的未来，微服务可以自修复，可以自动扩展，可以跨zone，region甚至跨云供应商进行federate。在这样的云原生应用程序的新纪元里，能够以简单的方式洞察服务之间是如何交互 ...
分类：
Web程序 时间：
2017-01-13 22:05:28
阅读次数：
314
链接地址: http://dongxicheng.org/framework-on-yarn/apache-spark-comparing-three-deploying-ways/ ...
分类：
Web程序 时间：
2017-01-12 08:42:33
阅读次数：
359
映射端口范围不能使用:1~1024 (除 80 443), 5000~5100, 6000~6999, 10000~20000, 31000~32000 映射端口可能与 Chrome 冲突: 6665~6669 映射端口已被占用: 8090,8099,9011,9988 映射端口输入0为随机分配 ...
分类：
其他好文 时间：
2016-12-29 19:18:20
阅读次数：
186
先看这篇文章：http://www.huochai.mobi/p/d/3967708/?share_tid=86bc0ba46c64&fmid=0 直接比较Hadoop和Spark有难度，因为它们处理的许多任务都一样，但是在一些方面又并不相互重叠。 比如说，Spark没有文件管理功能，因而必须依赖H ...
分类：
其他好文 时间：
2016-12-21 07:41:41
阅读次数：
596
