Java研发工程师知识点总结 最近一次更新2017年12月08日 大纲 一、Java基础(语言、集合框架、OOP、设计模式等) 二、Java高级(JavaEE、框架、服务器、工具等) 三、多线程和并发 四、Java虚拟机 五、数据库(Sql、MySQL、Redis等) 六、算法与数据结构 七、计算机 ...
分类:
编程语言 时间:
2019-02-09 19:35:14
阅读次数:
213
随着企业的发展,所用的系统越来越复杂。系统势必会发展成分布式系统。消息队列中间件是分布式系统中重要的组件,主要解决应用耦合,异步消息,流量削锋,可靠投递,广播,最终一致性等问题。实现高性能,高可用,可伸缩和最终一致性架构。 当前使用较多的 消息队列 有 RabbitMQ、RocketMQ、Activ ...
分类:
其他好文 时间:
2019-02-06 09:14:20
阅读次数:
224
Kafka应用场景 消息系统或是说消息队列中间件是当前处理大数据一个非常重要的组件,用来解决应用解耦、异步通信、流量控制等问题,从而构建一个高效、灵活、消息同步和异步传输处理、存储转发、可伸缩和最终一致性的稳定系统。当前比较流行的消息中间件有Kafka、RocketMQ、RabbitMQ、ZeroM ...
分类:
其他好文 时间:
2019-01-29 14:55:35
阅读次数:
129
浏览器使用流式布局模型 (Flow Based Layout)。浏览器会把HTML解析成DOM,把CSS解析成CSSOM,DOM和CSSOM合并就产生了Render Tree。有了RenderTree,我们就知道了所有节点的样式,然后计算他们在页面上的大小和位置,最后把节点绘制到页面上。由于浏览器使 ...
分类:
其他好文 时间:
2019-01-24 23:30:10
阅读次数:
286
wordCount POM文件需要导入的依赖: 离线代码: java版本: scala版本: 流式: java版本: scala版本 运行,传参: 终端使用nc命令进行模拟发送数据到9999端口 运行结果: 注意事项: 千万不要把包导错了,java就导java,scala就导scala,如果导错,程 ...
分类:
其他好文 时间:
2019-01-19 12:16:14
阅读次数:
139
带入gRPC:gRPC Streaming, Client and Server 原文地址:带入gRPC:gRPC Streaming, Client and Server 前言 本章节将介绍 gRPC 的流式,分为三种类型: Server-side streaming RPC:服务器端流式 RPC ...
分类:
其他好文 时间:
2019-01-17 23:39:33
阅读次数:
243
三分钟了解实时流式大数据分析大家好,今天为大家介绍华为云实时流计算服务CS,希望通过本次分享,大家能对华为云实时流计算服务的服务能力和业务场景有所了解。我们先了解一下实时流计算背景。下面列举的是流数据普遍产生的四个方面:一、日志;二、物联网,也就是传感器或者边缘设备所产生的数据;三、车联网,也就是车辆行驶过程中或者车载系统所产生的数据;四、StreamingML。流数据普遍产生,但并没有充分产生价
分类:
其他好文 时间:
2019-01-17 10:51:35
阅读次数:
193
Storm对比Hadoop,前者更擅长的是实时流式数据处理,后者更擅长的是基于HDFS,通过MapReduce方式的离线数据分析计算。对于Hadoop,本身不擅长实时的数据分析处理。两者的共同点都是分布式架构,而且都类似有主/从关系的概念。 本文不会具体阐述Storm集群和Zookeeper集群如何 ...
分类:
其他好文 时间:
2019-01-13 10:21:39
阅读次数:
236
1.HDFS的设计思路? hdfs是分布式的文件系统,用来在廉价的集群上做大数据量的存储。1.大文件被切割成小文件,使用分而治之的思想让很多服务器对同一个文件进行联合管理2.每个小文件做冗余备份,并且分散存到不同的服务器,做到高可靠不丢失2.HDFS的架构?namenode:集群老大,掌管文件系统目录树,处理客户端读且请求SecondaryNamenode:持久化元数据,主要
分类:
其他好文 时间:
2019-01-11 14:46:18
阅读次数:
164
一、SparkStreaming的介绍(1)为什么要有SparkStreaming? Hadoop的MapReduce及SparkSQL等只能进行离线计算,无法满足实时性要求较高的业务需求,例如实时推荐、实时网站性能分析等,流式计算可以解决这些问题。目前有三种比较常用的流式计算框架,它们分别是Storm,SparkStreaming和fink。(2)SparkStreamin
分类:
其他好文 时间:
2019-01-06 22:04:55
阅读次数:
190