作者|Draveness导读：本文作者写这篇文章前前后后大概2个月的时间，全文大概2w字，建议收藏后阅读或者通过电脑阅读。调度是一个非常广泛的概念，很多领域都会使用调度这个术语，在计算机科学中，调度就是一种将任务（Work）分配给资源的方法。任务可能是虚拟的计算任务，例如线程、进程或者数据流，这些任务会被调度到硬件资源上执行，例如：处理器CPU等设备。图1-调度系统设计精要本文会介绍调度系统的常见
分类：
其他好文 时间：
2020-02-12 19:05:25
阅读次数：
70
Introduction 在springboot中自带了一个轻量级的调度系统。如果我们希望在特定的时间或者以特定的时间间隔完成某些任务，那么它完全能够满足需求，不需要再额外引入像 这种略显沉重的调度框架。下面我们就来介绍springboot中 注解的用法。 环境：springboot 2.2.2 常 ...
分类：
编程语言 时间：
2020-01-31 23:12:27
阅读次数：
151
调度系统: 1. oozie: 和hadoop、hive、spark有很强的版本依赖 ...
分类：
其他好文 时间：
2020-01-26 22:31:20
阅读次数：
91
daemonset简单操作使用 Deployment 是 Kubernetes 中用于处理无状态服务的资源，而 StatefulSet 是用于支持有状态服务的资源，这两种不同的资源从状态的角度对服务进行了划分，而 DaemonSet 从不同的维度解决了集群中的问题 — 如何同时在集群中的所有节点上提 ...
分类：
Web程序 时间：
2020-01-18 10:32:34
阅读次数：
120
Taints和Tolerations（污点和容忍） Taint需要与Toleration配合使用，让pod避开那些不合适的node。在node上设置一个或多个Taint后，除非pod明确声明能够容忍这些“污点”，否则无法在这些node上运行。Toleration是pod的属性，让pod能够（注意，只 ...
分类：
Web程序 时间：
2020-01-17 10:02:38
阅读次数：
132
一 Kubernetes 调度简介 除了让 kubernetes 集群调度器自动为 pod 资源选择某个节点（默认调度考虑的是资源足够，并且 load 尽量平均），有些情况我们希望能更多地控制 pod 应该如何调度。比如，集群中有些机器的配置更好（ SSD，更好的内存等），我们希望比较核心的服务（比 ...
分类：
Web程序 时间：
2020-01-16 23:59:45
阅读次数：
257
1、计算机系统的组成计算机系统由硬件和软件两部分组成硬件，是指计算机的实体部分，由看得见摸得着的各种电子元器件组成，如主机、外设软件，是指具有各类特殊功能的程序，通常放在计算机的主存或辅存中软件分为系统软件和操作软件系统软件（程序软件），用来管理整个计算机系统，监听服务，调度系统资源，包括：标准程序 ...
分类：
其他好文 时间：
2020-01-08 23:24:59
阅读次数：
224
一、概述1、 为什么需要工作流调度系统一个完整的数据分析系统通常都是由大量任务单元组成： shell脚本程序，java程序，mapreduce程序、hive脚本等;各任务单元之间存在时间先后及前后依赖关系;为了很好地组织起这样的复杂执行计划，需要一个工作流调度系统来调度执行；例如：我们可能有这样一个... ...
分类：
其他好文 时间：
2020-01-07 10:25:31
阅读次数：
92
本文详细的介绍了Hadoop的Yarn架构与原理分析
分类：
其他好文 时间：
2020-01-03 19:39:26
阅读次数：
84
文章目录1、Yarn介绍2、Yarn架构2.1 、ResourceManager2.2 、ApplicationMaster2.3 、NodeManager2.4 、Container2.5 、Resource Request 及 Container2.6 、JobHistoryServer2.7、 ...
分类：
其他好文 时间：
2019-12-28 19:24:00
阅读次数：
94
