1、认识Hadoop和Hbase 1.1 hadoop简单介绍 Hadoop是一个使用java编写的Apache开放源代码框架,它允许使用简单的编程模型跨大型计算机的大型数据集进行分布式处理。Hadoop框架工作的应用程序可以在跨计算机群集提供分布式存储和计算的环境中工作。Hadoop旨在从单一服务 ...
分类:
其他好文 时间:
2020-01-16 13:00:17
阅读次数:
97
Spring Cloud为最常见的分布式系统模式提供了一个简单且可访问的编程模型,帮助开发人员构建有弹性、可靠和协调的应用程序。Spring Cloud是建立在Spring Boot之上的,这使得开发人员可以很容易地开始并快速地提高效率。 ? 服务发现(Service Discovery) 一个动态 ...
分类:
编程语言 时间:
2020-01-15 13:52:09
阅读次数:
92
部分资料来自 该项目通过自动配置和Spring环境以及其他Spring编程模型习惯用法提供了Spring Boot应用程序的Consul集成。 通过一些简单的注释,您可以快速启用和配置应用程序内的通用模式,并使用基于Consul的组件构建大型分布式系统。 提供的模式包括服务发现,控制总线和配置。 智 ...
分类:
编程语言 时间:
2020-01-14 10:07:57
阅读次数:
113
1. 体系结构 体系结构向软件开发人员提供了指令集和工作流程,也叫编程模型。体系结构是功能性的说明,是硬件与软件的桥梁,描述了软件依靠硬件能提供什么样的功能。体系结构包括几个部分。 指令集 每条指令的功能 指令在存储器中如何存放(指令的编码) 寄存器 寄存器数量 寄存器大小 寄存器功能 初始状态 异 ...
分类:
其他好文 时间:
2020-01-14 09:33:44
阅读次数:
162
导读: 第一节:基础架构 1:编程模型 2:架构 3:数据传输 4:高可靠性 5:高维护性 6:数据处理方式 7:对比MR,SPARK 第二节:计算模型 1:spout 2:bolt 3:stream grouping 4:构建拓扑与提交 第三节:架构 第四节:部署 第五节:数据处理 1:同步计算 ...
分类:
其他好文 时间:
2020-01-09 20:56:24
阅读次数:
117
目录RDD概述RDD实现RDD运行流程RDD分区RDD操作分类RDD编程接口说明一、RDD概述RDD:是Resilient distributed datasets的简称,中文为弹性分布式数据集;是Spark最核心的模块和类DAG:Spark将计算转换为一个有向无环图(DAG)的任务集合,通过为RD... ...
分类:
其他好文 时间:
2020-01-08 14:43:26
阅读次数:
102
1.什么是spring?Spring是个java企业级应用的开源开发框架。Spring主要用来开发Java应用,但是有些扩展是针对构建J2EE平台的web应用。Spring框架目标是简化Java企业级应用开发,并通过POJO为基础的编程模型促进良好的编程习惯。2.使用Spring框架的好处是什么?轻量:Spring是轻量的,基本的版本大约2MB。控制反转:Spring通过控制反转实现了松散耦合,对
分类:
编程语言 时间:
2020-01-05 10:11:02
阅读次数:
103
一开始学习顺利编码结构,在这种编程结构中,语句按编写顺序执行。 该结构的问题在于,随着需求的增加,复杂性也指数级增加。 为了降低复杂性,将代码块转变成方法,产生了结构化编程模型。 在这种模型中,可以从一个程序中的多个位置调用同一个代码块,不需要复制。 但即使有这种结构,程序还是会很快变得臃肿不堪,需 ...
分类:
其他好文 时间:
2020-01-03 12:36:20
阅读次数:
67
asyncio是python 3.4引入的标准库,直接内置了对异步io的支持 asyncio的编程模型就是一个消息循环。我们从asyncio模块中直接获取一个EventLoop的引用,然后把需要执行的协程扔到EventLoop中执行,就实现了异步IO 用asyncio实现Hello world代码如 ...
分类:
编程语言 时间:
2019-12-31 18:59:36
阅读次数:
113
一手资料,完全来自官网,直接参考英文过来的,并加了一些自己的理解,希望能让看官君了解点什么,足矣。 环境:Flink1.9.1 难度:新手--战士--老兵--大师 目标: 理解Flink的计算模型 认识各重要组件 说明: 本篇作为前两篇的补充内容,算是理论篇 步骤: 01-Flink编程模型 Fli ...
分类:
其他好文 时间:
2019-12-26 13:17:20
阅读次数:
96