Spark Streaming是Spark核心API的扩展,可以实现可伸缩、高吞吐量、具备容错机制的实时流时数据的处理。支持多种数据源,比如Kafka、Flume、Twitter、ZeroMQ、Kinesis 以及TCP sockets。
??可以使用诸如map、reduce、join和window等高级函数进行复杂算法(比如,机器学习和图计算)的处理。最后还可以将处理结果存储到文件系统,数据库和仪表盘。本文主要内容有简介、架构与抽象、转化操作、行动操作。
分类:
其他好文 时间:
2018-09-10 00:59:24
阅读次数:
215
Horizon配置 概述 ? Horizon是一个用以管理、控制OpenStack服务的Web控制面板,也称之为Dashboard仪表盘 ? 可以管理实例、镜像、创建密匙对,对实例添加卷、操作Swift容器等。除此之外, 用户还可以在控制面板中使用终端(console)或VNC直接访问实例 ? 基于 ...
分类:
其他好文 时间:
2018-09-06 21:32:24
阅读次数:
416
做过安防视频监控的同学都清楚,在视频监控系统软件上都可以看到一个云台控制区域,可以对球机进行下下左右等八个方位的运动控制,还可以进行复位,一般都是美工作图好,然后贴图的形式加入到软件中,好处是程序简单,界面美工,主要取决于美工的美图能力,缺点是对于各种分辨率的适应性稍微差点,需要不同的图片切图贴图, ...
分类:
其他好文 时间:
2018-09-04 23:33:49
阅读次数:
332
1.外观模式--驾驶者只需要通过高级接口(方向盘,踏板,仪表盘)就可以轻易操控汽车 2.单例模式不能被继承的才使用。 3.每个子类都实现单例模式,再有父类的Instance去获取这些子类。 4.类中类 “依赖性注入” 5.静态类返回静态接口。 6,让类具有计数功能限制数量 7.设置成为类的引用,让对 ...
分类:
其他好文 时间:
2018-08-31 21:55:23
阅读次数:
521
Kibana汉化使用中文界面实践 一、背景 笔者在上一篇文章 "使用Docker快速部署ELK分析Nginx日志实践" 当中有提到如何快速搭建ELK分析Nginx日志,但是这只是第一步,后面还有很多仪表盘需要配置,而对于大部分人来说,英文并不是那么好,但Kibana都是英文界面,这就阻碍了笔者熟悉K ...
分类:
其他好文 时间:
2018-08-31 17:14:30
阅读次数:
216
转java 3年了,记一个最近的坑; 临近818,苏宁小店线上 app 搞了个秒杀活动,后台服务出现了异常。 活动是周五 10 点,收到了系统的告警短信,同事开始有人在公司豆芽(苏宁内部通信工具)反馈有部分用户下单失败; 在监控仪表盘上也可以看到访问量开始剧增,同时响应时间开始变长,中台价格系统开始 ...
分类:
其他好文 时间:
2018-08-27 18:40:00
阅读次数:
171
基于Canvas实现的仪表盘及效果。通过配置参数,可以任意修改仪表盘颜色,刻度,动画过渡时间等,满足不同场景下的使用。同时使用原生的Canvas,也是学习Canvas的很好的例子。 ...
分类:
其他好文 时间:
2018-08-10 10:48:04
阅读次数:
306
一、简单介绍cAdvisor:是Google用来监测单节点的资源信息的监控工具,常被当作其他监控的数据采集使用。InfluxDB:是一个开源的没有外部依赖的时间序列数据库。适用于记录度量,事件及执行分析。Grafana:是一个可视化面板(Dashboard),有着非常漂亮的图表和布局展示,功能齐全的度量仪表盘和图形编辑器,支持Graphite、Zabbix、InfluxDB、Prometheus和
分类:
数据库 时间:
2018-08-01 14:28:49
阅读次数:
139
首页面是一把鼻涕一把泪做完的。基本上需求是两三天一改,从开始到作成一共改了八九次需求。最后做的一点激情没有了。 期初是想做成仪表盘,后来做成第一版后经理看了一下,项目经理设计的方案跟经理的要求出入很大。所以有了第一次更改。改了n次之后确定要作成一个首页面的效果。前端ui设计都需要我自己去做。想了一天 ...
分类:
其他好文 时间:
2018-06-26 16:02:22
阅读次数:
117
Grafana 是 Graphite 和 InfluxDB 仪表盘和图形编辑器。 Grafana 是开源的,功能齐全的度量仪表盘和图形编辑器,支持 Graphite,InfluxDB 和 OpenTSDB。Grafana 主要特性:灵活丰富的图形化选项;可以混合多种风格;支持白天和夜间模式;多个数据 ...
分类:
其他好文 时间:
2018-06-25 20:35:14
阅读次数:
608