目录RDD概述RDD实现RDD运行流程RDD分区RDD操作分类RDD编程接口说明一、RDD概述RDD:是Resilient distributed datasets的简称,中文为弹性分布式数据集;是Spark最核心的模块和类DAG:Spark将计算转换为一个有向无环图(DAG)的任务集合,通过为RD... ...
分类:
其他好文 时间:
2020-01-08 14:43:26
阅读次数:
102
目录包括运行流程图常用术语、执行原理、调度算法、容错及HA、监控 ...
分类:
其他好文 时间:
2020-01-08 14:11:33
阅读次数:
99
今天讲一下我们it这一行最经常见面的也是市场面最主流的监控服务,zabbix,它的几个核心组件和运行过程。那么zabbix支持哪些通讯方式呢?我们最常用的agent 基于自身zabbix_agent客户端插件监控系统的状态SNMP: 通过SNMP协议与监控对象进行通讯,交换机、防火墙等网络设备一般都 ...
分类:
其他好文 时间:
2020-01-05 19:10:20
阅读次数:
154
1、在 web 项目的 web.xml 文件配置 DispatcherServlet,启动 web 项目完成初始化动作 2、http 请求到 DispatcherServlet 3、根据 HttpServletRequest 查找 HandlerExecutionChain 4、根据 Handler ...
分类:
编程语言 时间:
2020-01-01 20:25:32
阅读次数:
78
作为一个程序员,经常需要画流程图来展示系统的运行流程或者是来表述某些业务的业务逻辑。可以说画流程图已经是程序员必须掌握的一个技能了。本文就从什么是流程图、流程图的适用场景以及怎么画好一个流程图这几个方面来介绍下流程图的基本知识。 什么流程图 流程图=流程+图。 流程 :Flow, 是指特定主体为了满 ...
分类:
其他好文 时间:
2019-12-24 15:26:13
阅读次数:
123
diango运行流程 Django处理一个请求的流程: 1. 在浏览器的地址栏中输入地址,回车,发了一个GET请求 2. wsgi模块接收了请求,将请求的相关信息封装成request对象 3. 根据地址找到对应函数 4. 执行函数获取到返回结果,wsgi模块将结果返回给浏览器 发请求的途径: 1. ...
分类:
其他好文 时间:
2019-12-19 18:55:08
阅读次数:
112
Scrapy 一 介绍 Scrapy简介 Scrapy架构图 Scrapy运行流程 二 安装 三 命令行工具 介绍 示例 四 项目结构以及爬虫应用简介 目录结构 应用说明 pycharm中运行爬虫程序 五 Spiders 1.介绍 2.Spider会循环做的事情 3.爬取格式 entrypoint. ...
分类:
编程语言 时间:
2019-12-16 13:37:02
阅读次数:
120
主从架构可以说是互联网必备的架构了,第一是为了保证服务的高可用,第二是为了实现读写分离,你可能熟悉我们常用的MySQL数据库的主从架构,对于我们redis来说也不意外,redis数据库也有各种各样的主从架构方式,在主从架构中会涉及到主节点与从节点之间的数据同步,这个数据同步的过程在redis中叫做复制,这在篇文章中,我们详细的聊一聊redis的复制技术和主从架构,本文主要有以下内容:主从架构环境搭
分类:
其他好文 时间:
2019-12-15 23:54:41
阅读次数:
156
1.springmvc运行流程 流程图是直接在百度图片中找的一张 >.前台发送请求,请求会首先通过DispatcherServlet进行url的匹配;如果匹配不到,看是否配置<mvc:default-servlet-hanler> 如果配置了,就找对应的目标资源 >.如果匹配到url,就调用Hand ...
分类:
编程语言 时间:
2019-12-15 18:05:22
阅读次数:
86
007Mybatis视频教程 网盘地址: 链接:https://pan.baidu.com/s/1wOLebxjFyY70kzCzHU2sqw 提取码:wo9s 加公众号 获取更多新教程 教程目录大纲 ./007Mybatis ├── 课件&代码.zip ├── 视频1 │ ├── 10.MyBat ...
分类:
其他好文 时间:
2019-12-14 13:34:18
阅读次数:
65