Apache Flink 的简介 Apache Flink是由Apache软件基金会开发的开源流处理框架，其核心是用Java和Scala编写的分布式流数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序，Flink的流水线运行时系统可以执行批处理和流处理程序。此外，Flink的运行时本身也 ...
分类：
Web程序 时间：
2020-03-23 12:36:54
阅读次数：
88
Spring Cloud是一系列框架的有序集合。它利用Spring Boot的开发便利性巧妙地简化了分布式系统基础设施的开发，如服务发现注册、配置中心、消息总线、负载均衡、断路器、数据监控等，都可以用Spring Boot的开发风格做到一键启动和部署。Spring Cloud并没有重复制造轮子，它只 ...
分类：
编程语言 时间：
2020-03-22 15:38:08
阅读次数：
78
一. 安装FTP软件 二. 常见功能调试 在 CentOS 的默认值当中，vsftpd 是同时开放实体用户与匿名用户的，CentOS 的默认值如下： 如上默认设置FTP可以达到如下功能： 你可以使用 anonymous 这个匿名账号或其他实体账号 (/etc/passwd) 登入； anonymou ...
分类：
系统相关 时间：
2020-03-22 15:37:34
阅读次数：
86
这里的数据流指数据从前端流向后端的过程中途径的所有组件或者说服务，比如用户的http请求先到Nginx,再到后端服务1,再到发现服务，再到缓存服务，再到后端服务2,然后是数据库，以及其他调用，总的来说就是一个请求进入的路径，如果将这样的一个过程可视化出来，我想是不错的，而这样的一个可视化也就可以做成一个监控的可视化，监控测试的连接是否可以完成的完成相应以及发现那个组件出现了问题。而这里的前端后端并
分类：
其他好文 时间：
2020-03-21 23:22:01
阅读次数：
64
流的分类 按操作数据单位不同分为：字节流(8 bit)，字符流(16 bit) 按数据流的流向不同分为：输入流，输出流 按流的角色的不同分为：节点流，处理流 节点流 FileReader 使用char数组加速 FileWriter FileReader 和 FileWriter FileInputS ...
分类：
其他好文 时间：
2020-03-21 21:45:31
阅读次数：
66
HDFS写数据流程 1.客户端通过Distributed FileSystem模块向NameNode请求上传文件，NameNode检查目标文件是否已经存在，父目录是否存在； 2.NameNode返回是否可以上传文件； 3.客户端请求一个block上传到指定的那个DataNode服务器上； 4.Nam ...
分类：
其他好文 时间：
2020-03-20 19:52:48
阅读次数：
56
1.默认输入输出 默认输入 键盘：stdin 默认输出 屏幕：stdout 2.输出重定向 重定向：改变数据流输出的位置、方向，例如输出到文件。使用">"表示。 命令 > 文件名：例如ifconfig > ~/leo/log.txt，将ifconfig的输出重定向到~/leo/log.txt文件中。 ...
分类：
其他好文 时间：
2020-03-20 14:28:08
阅读次数：
70
kafka分区，excutor，task，RDD分区的关系： 数据的流：数据流向从kafka>sparkStreaming>RDD 1 kafka中的 topic 的 patition 分区的设置，kafka 的 partition 分区数 ，sparkStreaming 直连方式从kafka中拉数 ...
分类：
其他好文 时间：
2020-03-20 12:30:57
阅读次数：
108
前言前段时间写了一篇对协程的一些理解，里面提到了不管是协程还是callback，本质上其实提供的是一种异步无阻塞的编程模式；并且介绍了java中对异步无阻赛这种编程模式的支持，主要提到了Future和CompletableFuture；之后有同学在下面留言提到了RxJava，刚好最近在看微服务设计这 ...
分类：
编程语言 时间：
2020-03-20 10:36:27
阅读次数：
58
通过一种NetWork TAP的流量复制设备，可以通过旁路、串接模式实现链路间的流量捕获功能，并将流量复制3-4份输出。
分类：
其他好文 时间：
2020-03-19 15:09:01
阅读次数：
51
