阮一峰老师的文章：http://www.ruanyifeng.com/blog/2016/01/flux.html 1、Flux相对于MVC，有什么优势呢？ 就是它比较简单，最大的特点是“单向数据流”（Action -> Store -> View -> Action -> Store -> ... ...
分类：
Web程序 时间：
2020-06-21 12:03:50
阅读次数：
63
为什么要管理状态 有状态的计算是流处理框架要实现的重要功能，因为稍复杂的流处理场景都需要记录状态，然后在新流入数据的基础上不断更新状态。下面的几个场景都需要使用流处理的状态功能： 数据流中的数据有重复，我们想对重复数据去重，需要记录哪些数据已经流入过应用，当新数据流入时，根据已流入过的数据来判断去重 ...
分类：
其他好文 时间：
2020-06-20 11:32:28
阅读次数：
67
Linux 默认提供了三个特殊设备，用于终端的显示和输出，分别为stdin（标准输入,对应于你在终端的输入），stdout（标准输出，对应于终端的输出），stderr（标准错误输出，对应于终端的输出）。 > 重定向 将 cat 的连续输出（heredoc 方式）重定向到一个文件 echo 的内容重定 ...
分类：
系统相关 时间：
2020-06-19 16:16:42
阅读次数：
60
NVIDIA空中导航SDK改造5G通信 Transforming Next-Generation Wireless with 5T for 5G and the NVIDIA Aerial SDK NVIDIA Mellanox 5T for 5G技术为构建高效、时间同步的CloudRAN基础设施提 ...
分类：
其他好文 时间：
2020-06-19 13:55:01
阅读次数：
73
第一阶段：分布式协调组件第一单元掌握ZooKeeper的核心设计ZooKeeper生态体系结构ZooKeeper总体架构设计ZooKeeper读写请求流程深度剖析第二单元掌握ZooKeeper服务端源码流程ZooKeeper启动流程源码深度剖析Master选举算法源码深度剖析服务端通信模型源码深度剖析第三单元掌握ZooKeeper客户端源码流程客户端启动流程源码剖析客户端通信模型源码剖析Sessi
分类：
其他好文 时间：
2020-06-19 10:23:42
阅读次数：
63
前一篇总结了下生产者Java API，本篇参照源码总结下生产数据的具体流程，先上图： 1. Producer创建时，会创建一个Sender线程并设置为守护线程 2. 生产消息时，内部其实是异步流程；生产的消息先经过拦截器->序列化器->分区器，然后将消息缓存在缓冲区（该缓冲区也是在Producer创 ...
分类：
其他好文 时间：
2020-06-18 21:10:43
阅读次数：
63
简述：爬取整个网站级别等需求复杂的爬虫，可以使用Scrapy框架。并发性好，速度快。 构成： 5+2结构 1. Engine模块 作用：1. 控制所有模块（2,3,4,5,a,b）之间的数据流 2. 根据条件来触发事件 a. Downloader Middleware(Downloader模块和en ...
分类：
其他好文 时间：
2020-06-16 20:14:06
阅读次数：
56
架构图是什么？为什么要画架构图？如何画好架构图？有哪些方法？本文从架构的定义说起，分享了阿里文娱高级技术专家箫逸关于画架构图多年的经验总结，并对抽象这一概念进行了深入地讨论。内容较长，同学们可收藏起来细细阅读。
分类：
其他好文 时间：
2020-06-16 15:28:25
阅读次数：
722
1. flink简介 1.1 什么是flink Apache Flink是一个分布式大数据处理引擎，可以对有限数据流（如离线数据）和无限流数据及逆行有状态计算（不太懂）。可以部署在各种集群环境，对各种大小的数据规模进行快速计算。 1.2 flink的架构体系 具体见文档 2. flink的安装 修改 ...
分类：
其他好文 时间：
2020-06-16 00:38:14
阅读次数：
46
1、数据移动模型(DMM)数据移动模型主要用于描述模型之间的数据流动关系，利用数据移动模型可以分析和记录数据源、数据移动路径以及数据转换方式；另外，通过数据移动模型还可以完成数据库对象的复制处理以及表达数据抽取、转换和加载的过程(Extraction-Transformation-Loading，E ...
分类：
其他好文 时间：
2020-06-15 17:30:47
阅读次数：
55
