本文已收录GitHub,更有互联网大厂面试真题,面试攻略,高效学习资料等近些年来,开源流处理领域涌现出了很多优秀框架。光是在Apache基金会孵化的项目,关于流处理的大数据框架就有十几个之多,比如早期的ApacheSamza、ApacheStorm,以及这两年火爆的Spark以及Flink等。应该说,每个框架都有自己独特的地方,也都有自己的缺陷。面对这众多的流处理框架,我们应该如何选择呢?在本文汇
分类:
其他好文 时间:
2020-07-07 11:38:26
阅读次数:
67
Ocelot是一个用.NET Core实现的开源API网关技术。IdentityServer4是一个基于OpenID Connect和OAuth2.0的针对ASP.NET Core的框架,以中间件的形式存在。OAuth是一种授权机制。系统产生一个短期的token,用来代替密码,供第三方应用使用。 使 ...
分类:
其他好文 时间:
2020-07-03 21:30:49
阅读次数:
100
List<Integer> collect = StreamSupport.stream(dwflztglbRepository.findAll().spliterator(), false).map(Dwflztglb::getZtId).distinct().collect(Collectors ...
分类:
编程语言 时间:
2020-07-02 16:46:26
阅读次数:
83
协议 file:// — 访问本地文件系统 http:// — 访问 HTTP(s) 网址 ftp:// — 访问 FTP(s) URLs php:// — 访问各个输入/输出流(I/O streams) zlib:// — 压缩流 data:// — 数据(RFC 2397) glob:// — ...
分类:
Web程序 时间:
2020-06-29 00:13:42
阅读次数:
81
ffmpeg细节整理记录 1、-vcodec、-code:v、-c:v ffmpeg的官方文档 -vcodec 是 -code:v 别名。 -vcodec codec (output) Set the video codec. This is an alias for -codec:v. 也就是说- ...
分类:
其他好文 时间:
2020-06-28 12:31:55
阅读次数:
61
使用Stream已经快3年了,但是从未真正深入研究过Stream的底层实现。 今天开始把最近学到的Stream原理记录一下。 本篇文章简单描述一下自己对pipeline的理解。 基于下面一段代码: public static void main(String[] args) { List<Strin ...
分类:
其他好文 时间:
2020-06-26 01:36:40
阅读次数:
99
这几天一直在忙别的事,完事了,看了点文件系统相关的部分,就看看 read 在内核里面的实现 这是大概的函数调用链,但是我不会一个一个全部去分析,我只看主要的 man 手册描述 via:https://man7.org/linux/man-pages/man2/read.2.html NAME rea ...
分类:
系统相关 时间:
2020-06-25 17:39:42
阅读次数:
113
命名查询的前缀定义可以在PartTree类找到, package org.springframework.data.repository.query.parser; public class PartTree implements Streamable<OrPart> { // ... privat ...
分类:
编程语言 时间:
2020-06-08 10:44:27
阅读次数:
64
在Flink的官网写着:Stateful Computations over Data Streams。 基于状态计算的数据流。 在流式计算中,希望做一些聚合分析等。那么就需要保存当前日志的状态,以备与后来的日志做比较。 在Flink中每个操作都会有状态的保存无论是source、sink还是oper ...
分类:
其他好文 时间:
2020-05-26 12:38:24
阅读次数:
87
写在前面 先说点题外话:不少读者工作几年后,仍然在使用Java7之前版本的方法,对于Java8版本的新特性,甚至是Java7的新特性几乎没有接触过。真心想对这些读者说:你真的需要了解下Java8甚至以后版本的新特性了。 今天,一名读者出去面试,面试官问他:说说Java8中创建Stream流有哪几种方 ...
分类:
编程语言 时间:
2020-05-26 01:09:12
阅读次数:
69