IO流的分类： 按流向分类：输入流、输出流按操作对象分类： 字节流、字符流按功能分类： 节点流、处理流 Input 输入Output 输出Java.io.File类,文件输入输出类 字节流和字符流： 字节流和字符流： 1，字节流InputStream（读）,OutputStream（写）。2，字符流 ...
分类：
编程语言 时间：
2019-06-16 15:57:50
阅读次数：
98
W tensorflow/core/platform/cpu_feature_guard.cc:45] The TensorFlow library wasn't compiled to use SSE3 instructions, but these are available on your m... ...
分类：
其他好文 时间：
2019-06-15 20:16:32
阅读次数：
129
前面介绍了流计算，在流计算领域，一个热门的计算框架就是-Storm。还是先介绍概念。。。 一、Storm是什么 在流处理过程中，我们除了考虑最重要的数据处理的逻辑，还需要维护消息队列和消费者，考虑消息怎么流、怎么序列化等。而Storm就是这样一个流式计算框架，它为你完成了消息传递等这些通用模块，让你 ...
分类：
其他好文 时间：
2019-06-14 23:33:51
阅读次数：
131
（基础架构、基础服务、基础平台、基础中间件等等） 前言 程序开发毕竟还不是搬砖这种无脑体力劳动，需要事先有标准，有架构，有设计，绝对不是新公司今天创立，明天就可以开始编码的。其实很多公司在起步的时候没有财力和资源建设独立的基础架构或平台架构部门，甚至运维团队都没有，但是这不妨碍我们心中有一个蓝图知道 ...
分类：
其他好文 时间：
2019-06-09 23:59:41
阅读次数：
232
概览 - kafka解决的问题- 主题 - 分区 - 消息- 生产者- broker - broker集群- 消费者 - 消费者组群 - 生产者分区和消费者群组- 消息可靠性- 消息系统 - 队列和广播 - 消息保序- 存储系统- 流处理- 整合- 应用场景- api分类kafka解决的问题 生产者 ...
分类：
其他好文 时间：
2019-05-16 15:16:21
阅读次数：
152
什么是复杂事件CEP？ 一个或多个由简单事件构成的事件流通过一定的规则匹配，然后输出用户想得到的数据，满足规则的复杂事件。 特征： 目标：从有序的简单事件流中发现一些高阶特征 输入：一个或多个由简单事件构成的事件流 处理：识别简单事件之间的内在联系，多个符合一定规则的简单事件构成复杂事件 输出：满足 ...
分类：
其他好文 时间：
2019-05-13 21:27:27
阅读次数：
279
ffmpeg 是一个由提供对视频、音频和其他多媒体流文件进行处理功能的库和程序构成的自由软件项目，其常被用于适用于不同格式的音频和视频的录影、转换和流处理等场合。这里记录在 Ubuntu 18.04 平台下安装 ffmpeg 的过程。( 注：ffmpeg 目前已经可以通过 apt 直接进行安装，见最 ...
分类：
系统相关 时间：
2019-05-11 21:44:50
阅读次数：
2383
状态（State）与一致性模型 接下来我们转向另一个在流处理中十分重要的点：状态（state）。状态在数据处理中是无处不在的。为了产生一个结果，函数一般会聚合某个时间段内（或是一定数量的）events的状态信息（例如计算聚合值，或是发现一个模式），有状态的 operators使用流的输入事件以及内部 ...
分类：
其他好文 时间：
2019-05-11 21:27:36
阅读次数：
153
3. 数据流操作 流处理引擎一般会提供一组内置的操作，用于对流做消费、转换，以及输出。接下来我们介绍一下最常见的流操作。 操作分为无状态的（stateless）与有状态的（stateful）。无状态的操作不包含任何内部状态。也就是说，处理此event时，并不需要任何其他历史event的信息，也不需要 ...
分类：
其他好文 时间：
2019-05-11 09:41:22
阅读次数：
151
一、Spark是什么？ 快速且通用的集群计算平台 二、Spark的特点： 1. 快速：Spark扩充流行的Mapreduce计算模型，是基于内存的计算 2. 通用：Spark的设计容纳了其它分布式系统拥有的功能，批处理、迭代式计算、交互查询和流处理等，降低了维护成本 3. 高度开放：Spark提供P ...
分类：
其他好文 时间：
2019-05-09 21:33:25
阅读次数：
135
