HDFS缓存 集中式缓存管理，由Datanode堆外内存组成，Namenode统一管理 优点： 阻止频繁使用的数据从内存中删除 由于是Namenode统一管理，因此在读可以根据情况调度，提高读性能 客户端可以通过零拷贝技术直接读取缓存数据 提高集群内存利用率，读某个文件的时候会将 解决步骤 查看是否 ...
分类：
其他好文 时间：
2021-04-14 12:00:19
阅读次数：
0
前言 本文主要介绍ElasticSearch冷热分离架构以及实现。 冷热分离架构介绍 冷热分离是目前ES非常火的一个架构，它充分的利用的集群机器的优劣来实现资源的调度分配。ES集群的索引写入及查询速度主要依赖于磁盘的IO速度，冷热数据分离的关键点为使用固态磁盘存储数据。若全部使用固态，成本过高，且存 ...
分类：
其他好文 时间：
2021-03-31 12:30:47
阅读次数：
0
作者个人研发的在高并发场景下，提供的简单、稳定、可扩展的延迟消息队列框架，具有精准的定时任务和延迟队列处理功能。自开源半年多以来，已成功为十几家中小型企业提供了精准定时调度方案，经受住了生产环境的考验。为使更多童鞋受益，现给出开源框架地址： https://github.com/sunshinely ...
分类：
数据库 时间：
2021-03-31 12:03:26
阅读次数：
0
保持 pod 健康 P84 只要 pod 调度到某个节点，该节点上的 Kubelet 就会运行 pod 的容器，从此只要该 pod 存在，就会保持运行。如果容器的主进程奔溃， Kubelet 就会自动重启容器；如果应用程序奔溃， Kubelet 就会自动重启应用程序。 P84 应用程序也可能因为无限 ...
分类：
Web程序 时间：
2021-03-31 11:53:08
阅读次数：
0
一、调度器的由来 调度本身是指操作系统中为每个任务分配其所需资源的方法。 在操作系充中，线程是任务执行的最小单位，是系统调度的基本单元。 虽然线程比进程轻量，但是在调度时也有比较大的额外开销，每个线程都会占用几M的内存，上下文切换时也会消耗几微秒的时间，这些都是高并发的阻碍。 Go语言的诞生有一个很 ...
分类：
其他好文 时间：
2021-03-30 13:55:46
阅读次数：
0
Java.Thread类 process(进程)和Thread(线程) 程序：指令和数据的有效集合，本身没有任何运行含有，是一个静态的概念 进程：执行程序的一次执行过程，是一个动态的概念。是系统资源分配的单位 线程：通常一个进程可以包含多个线程（由调度器安排调度，不可人为干预）一个进程至少有一个线程 ...
分类：
编程语言 时间：
2021-03-30 13:39:18
阅读次数：
0
一.定义 进程：具有独立功能的程序在某个数据集合上执行一次的过程。 线程：是进程内一个执行实体或执行单元。 比进程更小的能独立运行的基本单位，是操作系统能够进行运算调度的最小单位。 协程：本质上是一种控制抽象，简洁优雅的实现一些控制行为，在协程中，控制行为可从当前执行上下文跳转到程序其他位置，并且可 ...
分类：
编程语言 时间：
2021-03-29 12:29:41
阅读次数：
0
Celery是一个简单、灵活且可靠的，处理大量消息的分布式系统，专注于实时处理的异步任务队列，同时也支持任务调度。本系列将通过源码分析，和大家一起深入学习 Celery。本文是系列第二篇，继续探究 Celery 架构。 ...
分类：
其他好文 时间：
2021-03-29 12:19:38
阅读次数：
0
线程与进程 进程 Process 一个内存中运行的应用程序，每个进程都有一个独立的内存空间 线程 Thread 进程中的一个执行路径，共享一个内存空间，线程之间可以自由切换，并发执行. 一个进程最少 有一个线程 操作系统调度，程序本身无法确定线程的调度顺序 并发与并行 并发 两个或多个事件在同一个时 ...
分类：
编程语言 时间：
2021-03-26 15:29:00
阅读次数：
0
NVIDIA GPU自动调度神经网络 对特定设备和工作负载进行自动调整对于获得最佳性能至关重要。这是有关如何使用自动调度器为NVIDIA GPU调整整个神经网络。 为了自动调整神经网络，将网络划分为小的子图，并对其进行独立调整。每个子图被视为一个搜索任务。任务调度程序可以对时间进行分片，并为这些任务 ...
分类：
其他好文 时间：
2021-03-16 13:43:38
阅读次数：
0
