接上一篇继续分析一下runtime.newproc方法。 函数签名 newproc函数的签名为 newproc(siz int32, fn funcval) siz是传入的参数大小(不是个数); fn对应的是函数,但并不是函数指针,funcval.fn才是真正指向函数代码的指针。 关键字go 在go ...
分类:
其他好文 时间:
2020-05-25 12:40:10
阅读次数:
67
1.基础概念1.1集群与节点kubernetes是一个开源的容器引擎管理平台,实现容器化应用的自动化部署,任务调度,弹性伸缩,负载均衡等功能,cluster是由master和node两种角色组成master负责管理集群,master包含kube-apiserver,kube-controller-manager,kube-scheduler,etcd组件node节点运行容器应用,由Containe
分类:
Web程序 时间:
2020-05-25 09:44:49
阅读次数:
80
YARN调度架构 esourceScheduler是YARN的调度器,负责Container的分配。 AsyncDispatcher是单线程的事件分发器,负责向调度器发送调度事件。 ResourceTrackerService是资源跟踪服务,主要负责接收处理NodeManager的心跳信息。 App... ...
分类:
移动开发 时间:
2020-05-24 20:59:39
阅读次数:
118
本博来源:《linux高性能服务器编程》 TCP/IP协议族是一个四层协议系统。 可以看到该协议族是由多个协议组成的。其中重要的是IP协议、TCP协议、UDP协议。 同时可以清楚的看到,socket套接字处于应用层和传输层的中间,充当一个调度者的角色。 1.数据链路层:实现了网卡接口的网络驱动程序。 ...
分类:
其他好文 时间:
2020-05-24 12:01:00
阅读次数:
62
DataNode主机上的AppMaster向ResoureSchedule请求资源, ResoureSchedule 向 AppMaster 返回资源. 同时这个过程是异步的. AppMaster是一个yarn任务运行时第一个由RM启动的container,然后负责整个任务的运行,包括contain... ...
分类:
其他好文 时间:
2020-05-24 11:29:17
阅读次数:
50
一、线程和进程 一般都知道,线程是被包含在进程里的,一个进程可以有多个线程同时存在。 进程是资源分配的最小空间,线程是cpu调度的最小单位。 进程和线程的区别: 1、线程不能看做独立应用,而进程可看做独立应用。 2、进程有独立的地址空间,互相不影响,线程只是进程的不同执行路径。 3、线程没有独立的地 ...
分类:
编程语言 时间:
2020-05-24 09:27:45
阅读次数:
58
要激活一个meddleware, 要在设置里面添加。例如: DOWNLOADER_MIDDLEWARES = { 'myproject.middlewares.CustomDownloaderMiddleware': 543, } key是要激活的middleware的路径, value是它的val ...
分类:
其他好文 时间:
2020-05-24 00:55:13
阅读次数:
80
进程的生命周期 监控进程状态命令 ps 进程管理命令 top 什么是中断 中断是系统用来影响硬件设备请求的一种机制,它会打断进程的正常调度和执行,然后调用内核中的中断处理程序来影响设备的请求。 kill 信号管理 优先级 后台进程管理 ...
分类:
系统相关 时间:
2020-05-24 00:23:34
阅读次数:
78
Taint 和 Toleration 节点亲和性,是 pod 的一种属性(偏好或硬性要求),它使 pod 被吸引到一类特定的节点。Taint 则相反,它使节点能够排斥一类特定的 pod Taint 和 toleration 相互配合,可以用来避免 pod 被分配到不合适的节点上。每个节点上都可以应用 ...
分类:
Web程序 时间:
2020-05-23 18:11:29
阅读次数:
61
1、presto是什么 Presto是由Facebook开发的一个分布式SQL查询引擎,是专门设计为用来专门进行大数据实时查询计算而设计和开发的产品。 它是为了解决Hive的MapReduce模型太慢以及不能通过BI或Dashboards直接展现HDFS数据等问题。 2、presto特点 prest ...
分类:
其他好文 时间:
2020-05-23 18:05:11
阅读次数:
249