引言 Apache Flink是面向数据流处理和批处理的分布式开源计算框架，2016年阿里巴巴引入Flink框架，改造为Blink。2017年，阿里整合了所有流计算产品，决定以Blink引擎为基础，打造一款全球领先的实时计算引擎。当年双11，Blink支持了二十多个事业部／群，同时运行了上千个实时计 ...
分类：
其他好文 时间：
2018-11-23 14:06:25
阅读次数：
181
11月14日，阿里云重磅发布了实时计算独享模式，即用户独享一部分物理资源，这部分资源在网络/磁盘/CPU/内存等资源上跟其他用户完全独立，是实时计算在原有共享模式基础上的重大升级。
分类：
其他好文 时间：
2018-11-20 19:43:11
阅读次数：
122
11月14日，阿里云重磅发布了实时计算独享模式，即用户独享一部分物理资源，这部分资源在网络/磁盘/CPU/内存等资源上跟其他用户完全独立，是实时计算在原有共享模式基础上的重大升级。（观看实时计算发布会直播：https://yq.aliyun.com/live/591） 独享模式优点更加突出1、UDX开放：实时计算的共享模式是多个用户共享一个物理机群，在网络/磁盘层面没有办法做到完全隔离。
分类：
其他好文 时间：
2018-11-15 19:49:49
阅读次数：
215
2.1.11将希尔排序中实时计算递增序列改为预先计算并存储在一个数组中。public class Shell2{ public static void sort(Comparable[] a) { int N=a.length; int h=1; int[] SN=new int[20]; int ...
分类：
编程语言 时间：
2018-10-27 10:26:08
阅读次数：
161
一、平台基本功能 1. 数据接入 2. 数据存储和查询，存储模型应包括关系型模型，非关系型模型，文档模型等。 3. 数据计算，包括离线批处理，实时计算，机器学习，多维分析和全文检索。 4. 平台安全与管理，解决用户管理，数据隔离，访问授权，访问控制和集群服务安全等问题。 5. 平台辅助工具，如程序开 ...
分类：
其他好文 时间：
2018-09-18 00:29:33
阅读次数：
185
先做一个对比： 对比点 Storm Spark Streaming 实时计算模型 纯实时，来一条数据，处理一条数据 准实时，对一个时间段内的数据收集起来，作为一个RDD，再处理 实时计算延迟度 毫秒级 秒级 吞吐量 低 高 事务机制 支持完善 支持，但不够完善 健壮性 / 容错性 ZooKeeper ...
分类：
其他好文 时间：
2018-09-10 11:02:27
阅读次数：
539
在ZTO大数据实时计算广泛应用，200多个Redis实例稳定工作一年多，每天处理近1亿包裹数据，日均调用量80亿次； 低延迟，Get/Set操作平均耗时200~600us（含往返网络通信）； 大吞吐，自带连接池，最大支持1000并发； 高性能，支持二进制序列化； ...
分类：
Web程序 时间：
2018-08-30 11:05:41
阅读次数：
246
2017年6月，开始大数据分析的职业生涯，作为架构师，建立起一套基于.Net的小数据实时处理计算平台，这里记录学习过程中的点点滴滴！ 数据分析的核心，可以理解为：Select xxx From table Where yyy Group By zzz ...
分类：
其他好文 时间：
2018-08-12 14:06:34
阅读次数：
503
1.概述 Spark Streaming的主要应用方向是实时计算.这代表一个Spark Streaming应用必然是对执行性能和运行稳定性(7 x 24)有一定要求的 2.性能 在性能方面,主要是合理的利用的集群资源,设置正确的批处理大小(提升并行度)和减少每个批次的处理时间(计算逻辑优化).以让数 ...
分类：
其他好文 时间：
2018-07-15 16:13:54
阅读次数：
206
1、什么是storm Apache Storm is a free and open source distributed realtime computation system. 免费、开源、分布式、实时计算系统 Storm makes it easy to reliably process un ...
分类：
其他好文 时间：
2018-06-21 17:18:16
阅读次数：
172
