这篇文章涉及mesos如何在原生的mesoscontainerizer和docker containerizer上支持gpu的,以及如果自己实现一个mesos之上的framework capos支持gpu调度的实现原理,(capos是hulu内部的资源调度平台 refer to https://ww ...
分类:
其他好文 时间:
2018-07-28 15:26:49
阅读次数:
170
为什么可以基于checkpoint可以恢复offset?------>Driver HA package com.bjsxt.sparkstreaming;import scala.Tuple2; /** * * Spark standalone or Mesos with cluster depl ...
分类:
其他好文 时间:
2018-07-22 14:05:35
阅读次数:
198
美国著名渠道媒体CRN评选的“2018年十大最热DevOps初创企业”的榜单出炉,Rancher Labs作为全球领先的企业级容器与Kubernetes平台提供商入选该榜单。
分类:
其他好文 时间:
2018-07-19 17:35:00
阅读次数:
113
如何持续集成imageimage0 :开发人员提交代码到github1 :触发jenkins操作2 :jenkins将代码编译、验证3 :将代码封装在docker镜像并上传至docker仓库4 :jenkins向marathon发送部署请求,marathon完成相应部署5 :进行集成测试6 :集成测试通过,触发研发环境部署7 :进行集成测试8 :供用户访问基于mesos实践image环境准备:me
分类:
其他好文 时间:
2018-07-15 13:05:49
阅读次数:
165
多节点mesos集群1.配置master配置文件:/etc/default/mesos增加配置:IP=192.168.30.3(当前节点IP)2.配置slave节点配置文件:/etc/default/mesos增加配置:IP=192.168.30.4(当前节点IP)配置slave节点的master配置文件:/etc/mesos/zk配置:zk://192.168.30.3:2181/mesos3.
分类:
其他好文 时间:
2018-07-14 10:23:40
阅读次数:
141
Mesos简介什么是MESOS?Apache Mesos 是一个集群管理器,提供了有效的、跨分布式应用或框架的资源隔离和共享,可以运行 Hadoop、MPI、Hypertable、Spark。几个基本概念:Mesos master:负责任务调度的节点。Mesos slave:负责执行任务的节点。Mesos 框架:需要由mesos调度的应用程序,比如hadoop、spark、marathon、chr
分类:
其他好文 时间:
2018-07-13 12:15:31
阅读次数:
163
今天试了下marathon传参,新建一个job,增加一个参数,然后用cmd方式,echo出来 定义的json: 奇怪的是,除非用json方式定义,如果通过GUI方式定义是没有env这个section的,如下,没有env的地方: 执行后,去看mesos最近的一个任务日志(为啥marathon没有地方点 ...
分类:
其他好文 时间:
2018-06-17 20:53:41
阅读次数:
138
一、简介Tr?fik是一个为了让部署微服务更加便捷而诞生的现代HTTP反向代理、负载均衡工具。它支持多种后台(Docker,Swarmmode,Kubernetes,Marathon,Consul,Etcd,Rancher,...)来自动化、动态的应用它的配置文件设置。Tr?f?k可以监听你的服务发现、管理API,并且每当你的微服务被添加、移除、杀死或更新都会被感知,并且可以自动生成它们的配置文件
分类:
Web程序 时间:
2018-06-06 16:47:34
阅读次数:
295
对http://mesos.apache.org/documentation/latest/building/的实操。 下载的mesos包中的执行文件都为.sh.in文件且无执行权限,所以都要进行软件源安装。 一、Downloading MesosThere are different ways y ...
分类:
其他好文 时间:
2018-06-05 15:38:23
阅读次数:
342
docker和k8s 参考: "什么是Docker?" "Kubernetes概述" "openstack,docker,mesos,k8s什么关系?" IaaS、PaaS、SaaS的概念 SaaS:软件服务,Software as a service PaaS:平台服务,Platform as a ...
分类:
其他好文 时间:
2018-05-13 12:04:41
阅读次数:
497