干货走起，闲话不多说，以下就是小编整理的大数据学习思路第一阶段：linux系统本阶段为大数据学习入门基础课程，帮大家进入大数据领取打好Linux基础，以便更好的学习Hadoop、habse、NoSQL、saprk、storm等众多技术要点。另：目前企业中无疑例外是使用Linux来搭建或部署项目的第二阶段：大型网站高并发处理本阶段的学习是为了让大家能够了解大数据的源头，数据从而而来，继而更好的了解大
分类：
其他好文 时间：
2018-10-31 20:07:13
阅读次数：
231
## MapReduce概述- Google MapReduce的克隆版本- 优点：海量数据的离线处理，易开发，易运行- 缺点：实时流式计算Hadoop MapReduce是一个软件框架，用于轻松编写应用程序，以可靠，容错的方式在大型集群（数千个节点）的商用硬件上并行处理大量数据（多TB数据集） # ...
分类：
其他好文 时间：
2018-10-31 11:21:58
阅读次数：
138
一、介绍 HDFS ： 分布式文件系统（distributed filesystem），主从结构。 以流式数据访问模式来存储超大文件，运行于商用硬件集群上。 超大文件： 几百M，几百G，甚至几百TB大小的文件。 流式数据访问： 一次写入，多次读取。每次读取都涉及到数据集的大部分数据甚至是全部，因 此 ...
分类：
其他好文 时间：
2018-10-27 16:13:20
阅读次数：
189
demo：从文件中取包含字符“a”的5行数据做一次批处理！！！ ...
分类：
编程语言 时间：
2018-10-26 12:06:00
阅读次数：
437
1、布局方式分类 1.1、固定布局 ： 以px（像素）为单位。 缺点：① 页面死板，屏幕大小不一样，展示的效果不一样； ② 不适应响应性布局。 1.2、流式布局 ： 以%（百分比）作为单位。百分比宽度 = 目标元素宽度 / 上下文元素宽度。 优点 ： 可以自适应，根据不同的分辨率显示不同的宽度。 缺 ...
分类：
其他好文 时间：
2018-10-25 14:06:18
阅读次数：
161
什么是流式传输？ 流式传输是这一种以稳定持续流的形式传输数据的技术。 流式传输的使用场景 有些场景中，服务器返回的数据量较大，等待时间较长，客户端不得不等待服务器返回所有数据后，再进行相应的操作。这时候使用流式传输，可以将服务器数据碎片化，当每个数据碎片读取完成之后，就只传输完成的部分，而不需要等待 ...
分类：
Web程序 时间：
2018-10-23 22:56:40
阅读次数：
633
在 Qt的源码与Protobuf 的代码中，看到相同的简单消息（日志）输出的类实现，基本思路是使用宏定义，重载临时类对象，调用类方法或者通过析构函数自动调用输出方法，实现消息输出。这里以 Protobuf 的LogMessage 类为例，简单描述实现方法。 类定义很简单，主要是构造函数、重载的 op ...
分类：
编程语言 时间：
2018-10-23 00:07:03
阅读次数：
275
Spring Boot 2.0 的推出又激起了一阵学习 Spring Boot 热，那么， Spring Boot 诞生的背景是什么？Spring 企业又是基于什么样的考虑创建 Spring Boot? 传统企业使用 Spring Boot 会给我们带来什么样变革? 带着这些问题，我们一起来了解下 ...
分类：
编程语言 时间：
2018-10-19 16:47:32
阅读次数：
251
Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica），基于zookeeper协调的分布式消息系统，它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop的批处理系统、低延迟的实时系统、storm/Spark流式处理引擎，web/nginx日志、访问日志，消息服务等等，用scala语言编写，Linkedin于
分类：
其他好文 时间：
2018-10-18 16:57:12
阅读次数：
137
一.Kafka简介 Kafka是分布式发布-订阅消息系统。它最初由LinkedIn公司开发，使用Scala语言编写，之后成为Apache项目的一部分。Kafka是一个分布式的，可划分的，多订阅者，冗余备份的持久性的日志服务。它主要用于处理活跃的流式数据（实时性的计算）。 在大数据系统中，常常会碰到一 ...
分类：
其他好文 时间：
2018-10-18 00:47:23
阅读次数：
159
