Flink中的时间类型和窗口是非常重要概念，是学习Flink必须要掌握的两个知识点。Flink中的时间类型时间类型介绍Flink流式处理中支持不同类型的时间。分为以下几种：处理时间Flink程序执行对应操作的系统时间。所有基于时间的操作（例如：时间窗口）都将使用运行相应operator的系统时间。例... ...
分类：
其他好文 时间：
2020-02-05 09:16:30
阅读次数：
136
本文描述处理Protocol Buffer常用到的一些设计模式。你也可以给 "Protocol Buffers discussion group" 发送设计或使用问题。 流式多条消息 如果你想将多个消息写入到单个文件或流中，你需要记录一条消息的结束及另一个的开始。Protocol Buffer wi ...
分类：
其他好文 时间：
2020-02-03 19:28:42
阅读次数：
71
什么是流式处理呢？这个问题其实我们大部分时候是没有考虑过的，大多数，我们是把流式处理和实时计算放在一起来说的。我们先来了解下，什么是数据流。数据流（事件流）数据流是无边界数据集的抽象我们之前接触的数据处理，大多都都是有界的。例如：处理某天的数据、某个季度的数据等无界意味着数据是无限地、持续增长的数据... ...
分类：
其他好文 时间：
2020-02-03 09:50:30
阅读次数：
88
1、通常意义上，函数里所有需要任务去维护并用来计算结果的数据都属于任务的状态。比如 +1的算子，中间结果就是状态。 2、状态有两种， 算子状态：作用域是某个算子任务，所有在同一个并行任务之内的记录都能访问到相同的状态。算子状态不能通过其他任务访问。 健值分区状态： 3、有状态的流式应用的一致性检查点 ...
分类：
其他好文 时间：
2020-02-01 16:25:23
阅读次数：
71
热门商品代码： import 'package:flutter/material.dart'; import 'package:flutter_project/service/service_method.dart'; import 'dart:convert'; import 'package:f ...
分类：
其他好文 时间：
2020-01-27 15:46:35
阅读次数：
73
flex布局原理 常见的父项属性 flex-direction设置主轴方向 justify-content 设置主轴上的子元素排列方式 flex-wrap属性 align-items属性 align-content属性 flex-flow属性 常见的子项属性 align-selt属性 hj ...
分类：
移动开发 时间：
2020-01-26 20:50:51
阅读次数：
107
前言 在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作，应用范围与前景非常广泛。在美团?大众点评，已经有很多同学在各种项目中尝试使用Spark。大多数同学 ...
分类：
其他好文 时间：
2020-01-26 19:02:37
阅读次数：
63
[TOC] SparkStreaming相关概念 概述 SparkStreaming主要用作对流数据的实时处理，比如：实时的 web 日志数据分析、实时追踪页面访问统计数据等。 流数据的特点有： 数据一直在变化 数据无法回退 数据始终源源不断涌进 Spark Streaming 是在 Spark 上 ...
分类：
其他好文 时间：
2020-01-24 22:24:29
阅读次数：
95
flume 1.1 Flume定义 Flume是Cloudera提供的一个高可用的，高可靠的，分布式的 海量日志采集、聚合和传输的系统 。Flume基于流式架构，灵活简单。 大数据框架大致分为3类： 数据的采集和传输：flume 数据的存储：HDFS 数据的计算：MapReduce 1.2 应用场景 ...
分类：
Web程序 时间：
2020-01-23 12:37:38
阅读次数：
103
浏览器现状 视口 视口标签 二倍图 手机端和pc端像素比例不一样 防守打法 ...
分类：
移动开发 时间：
2020-01-23 09:52:00
阅读次数：
115
