Flink CEP CEP 复杂事件处理： 根据事件时间的时序关系和聚合关系定制检测规则,持续的从事件流中查询出符合需求的事件序列,分析后得到更复杂的复合事件。 说明： 1.CEP是支持事件乱序的,根据事件时间和WaterMark来判断数据的顺序。 2.Spark内部没有集成CEP,但是有解决方案, ...
分类：
其他好文 时间：
2021-06-02 20:18:35
阅读次数：
0
@ 前言-MR概述 MapReduce是一个分布式计算框架，是用户开发“基于Hadoop的数据分析应用”的核心框架。主要由两部分组成：编程模型和运行时环 境。其中，编程模型为用户提供了非常易用的编程接口，用户只需要像编写串行程序 一样实现几个简单的函数即可实现一个分布式程序，而其他比较复杂的工作，如 ...
分类：
其他好文 时间：
2021-06-02 19:46:24
阅读次数：
0
NumPy 数组切片 索引是左臂右开区间，比如说x[0:9:1]，只能是取到索引等于0处的元素到索引等于8处的元素，而取不到索引等于9的这个元素。元素索引都是0开始的，第一个亓素的索引是0.第一个亓素的索引是1，以此类推下去。 当不写start代表从起始索引处取数，当不写stop代表一直取数到最后位 ...
分类：
编程语言 时间：
2021-06-02 17:09:21
阅读次数：
0
该图来自于《大话设计模式》。 依赖关系：虚线箭头表示，指向被依赖对象。 继承关系：空心三角形+实线表示，子类指向父类。 组合关系：实心菱形+实线箭头表示。 关联关系：实线箭头表示。 聚合关系：空心菱形+实线箭头表示。 实现关系：空心三角形+虚线表示或者棒棒糖表示法。 ...
分类：
其他好文 时间：
2021-06-02 12:22:56
阅读次数：
0
6.8 迭代器模式 6.8.1 概述 定义： 提供一个对象来顺序访问聚合对象中的一系列数据，而不暴露聚合对象的内部表示。 6.8.2 结构 迭代器模式主要包含以下角色： 抽象聚合（Aggregate）角色：定义存储、添加、删除聚合元素以及创建迭代器对象的接口。 具体聚合（ConcreteAggreg ...
分类：
其他好文 时间：
2021-06-02 10:45:16
阅读次数：
0
#单臂路由以及链路聚合 ##一、单臂路由 ###1、单臂路由概述 单臂路由实现不同vlan间通信 ###2、链路类型 交换机连接主机的端口为access链路 交换机连接路由器的端口为trunk链路 ###3、子接口 路由器的物理接口可以被划分成多个逻辑接口 每个子接口对应一个VLAN网段的网关 ## ...
分类：
其他好文 时间：
2021-05-25 18:11:32
阅读次数：
0
聚合管道操作 聚合管道操作主要包含下面几个部分： 命令 功能描述 $project 指定输出文档里的字段. $match 选择要处理的文档，与fine()类似。 $limit 限制传递给下一步的文档数量。 $skip 跳过一定数量的文档。 $unwind 扩展数组，为每个数组入口生成一个输出文档。 ...
分类：
数据库 时间：
2021-05-24 16:40:49
阅读次数：
0
在使用MongoDB存储数据的时候，我们查询的时候，有时候难免会需要进行连表查询。但是MongoDB本身是非关系性数据库，连表查询，很多时候，需要我们自己在代码里手工操作。但是从 MongoDB 3.2 版本过后，我们可以使用 $lookup 进行连表查询。下面就简单介绍一下 MongoDB 的 $ ...
分类：
数据库 时间：
2021-05-24 15:55:53
阅读次数：
0
1.统计出IP的文件，哪个ip出现的次数最多，一行一个ip。如果文件很大，超过内存。 2.给定a、b两个文件，各存放50亿个url，每个url各占64B，内存限制是4GB，请找出a、b两个文件共同的url？ 3.现在有一个非常庞大的URL库（100E），然后现在还有一个URL，（迅速）判断这个URL ...
分类：
其他好文 时间：
2021-05-24 14:14:27
阅读次数：
0
1、聚类分析概述 聚类目前常用来做粗分类，粗分类完再细分类一般用其他算法实现 自顶向下法：分裂；自低向上法：聚合 2、相似性计算方法 2.1连续型属性的相似性计算方法 2.2二值离散型属性的相似性计算方法 2.3多值离散型属性的相似性计算方法 2.4混合类型属性的相似性计算方法 则d(1,2) = ...
分类：
编程语言 时间：
2021-05-24 13:39:30
阅读次数：
0
