码迷,mamicode.com
首页 >  
搜索关键字:datastream    ( 63个结果
Flink 1.8 DataStream API Programming Guide 数据流API编程指南
参考:https://ci.apache.org/projects/flink/flink-docs-release-1.8/dev/datastream_api.html Flink中的DataStream程序是实现数据流转换的常规程序(例如,过滤,更新状态,定义窗口,聚合)。 最初从各种源(例如 ...
分类:Windows程序   时间:2019-08-18 11:58:03    阅读次数:153
Flink DataStream API
5.Flink DataStream API 5.1 Flink 运行模型 以上为 Flink 的运行模型,Flink 的程序主要由三部分构成,分别为 Source、 Transformation、Sink。DataSource 主要负责数据的读取,Transformation 主要负责对 属于的转 ...
分类:Windows程序   时间:2019-07-13 09:13:20    阅读次数:182
Flink 的datastreamAPI 以及function函数的调用,性能调优
1 DataStreamAPI1.1 DataStream Data Sources source是程序的数据源输入,你可以通过StreamExecutionEnvironment.addSource(sourceFunction)来为你的程序添加一个source。 flink提供了大量的已经实现好 ...
分类:Windows程序   时间:2019-02-01 11:18:31    阅读次数:415
Apache Flink 数据流编程模型
抽象等级(Levels of Abstraction) Flink提供不同级别的抽象来开发流/批处理应用程序。 Statefule Stream Processing: 是最低级别(底层)的抽象,只提供有状态的流。它通过ProcessFunction嵌入到DataStream API之中。它使得用户 ...
分类:Web程序   时间:2019-01-05 13:36:44    阅读次数:214
Drools stream integration
This passage discusses how to integrate a provided drools package into datastream application.
分类:其他好文   时间:2018-10-05 01:02:11    阅读次数:173
HBase优化实战
本文来自网易云社区。 背景 Datastream一直以来在使用HBase分流日志,每天的数据量很大,日均大概在80亿条,10TB的数据。对于像Datastream这种数据量巨大、对写入要求非常高,并且没有复杂查询需求的日志系统来说,选用HBase作为其数据存储平台,无疑是一个非常不错的选择。 HBa ...
分类:其他好文   时间:2018-08-10 10:47:55    阅读次数:199
Apache Flink -Streaming(DataStream API)
综述: 在Flink中DataStream程序是在数据流上实现了转换的常规程序。 1.示范程序 2.数据源 程序从源读取输入。可以通过StreamExecutionEnvironment.addSource(sourceFunction)给程序附上源。 在StreamExecutionEnviron ...
分类:Windows程序   时间:2018-08-06 22:10:56    阅读次数:321
Apache Flink - 基本API概念
Flink程序是实现分布式集合转换的常规程序。集合最初是从源创建的。通过接收器(slink)返回结果,接收器可以将数据写到某个文件或stdout。Flink可以在各种环境(context)中运行,本地JVM或集群。 1.数据集和数据流 Flink用特殊的类DataSet and DataStream ...
分类:Windows程序   时间:2018-08-05 18:13:12    阅读次数:205
Flink执行时之流处理程序生成流图
流处理程序生成流图 DataStream API所编写的流处理应用程序在生成作业图(JobGraph)并提交给JobManager之前,会预先生成流图(StreamGraph)。 <!-- more --> 什么是流图 流图(StreamGraph)是表示流处理程序拓扑的数据结构。它封装了生成作业图 ...
分类:其他好文   时间:2017-08-18 17:04:24    阅读次数:188
Tabular DataStream protocol 协议
Tabular DataStream protocol 协议 Freetds 创建过程 https://wenku.baidu.com/view/2076cbfaaef8941ea76e0576.html 高效连接Mysql的PDO和ADODB是当今世界最快的数据库抽象类 http://blog.1 ...
分类:其他好文   时间:2017-07-24 16:32:31    阅读次数:143
63条   上一页 1 2 3 4 5 6 7 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!