HDFS的特点和目标： HDFS设计优点： （一）高可靠性：Hadoop按位存储和处理数据的能力值得人们信赖; （二）高扩展性：Hadoop是在可用的计算机集簇间分配数据并完成计算任务的，这些集簇可以方便地扩展到数以千计的节点中。 （三）高效性：Hadoop能够在节点之间动态地移动数据，并保证各个节 ...
分类：
其他好文 时间：
2018-06-02 20:40:58
阅读次数：
1165
近年来，大数据的计算引擎越来越受到关注，spark作为最受欢迎的大数据计算框架，也在不断的学习和完善中。在Spark2.x中，新开放了一个基于DataFrame的无下限的流式处理组件——Structured Streaming，它也是本系列的主角，废话不多说，进入正题吧！ 简单介绍 在有过1.6的s ...
分类：
其他好文 时间：
2018-06-02 17:10:16
阅读次数：
757
Kafka 压力测试文档 1 概述 1.1 测试背景 在云平台研发SR IAD的过程中，出现SR IAD对硬件资源消耗较为严重的情况，其中在云平台研发中利用Kafka软件对流式数据进行数据处理。我们针对Kafka高吞吐量的特性，对kafka进行压力测试。 1.2 测试目标 测试kafka的吞吐性能( ...
分类：
其他好文 时间：
2018-05-29 17:17:47
阅读次数：
951
伴随着信息科技日新月异的发展，信息呈现出爆发式的膨胀，人们获取信息的途径也更加多样、更加便捷，同时对于信息的时效性要求也越来越高。举个搜索场景中的例子，当一个卖家发布了一条宝贝信息时，他希望的当然是这个宝贝马上就可以被卖家搜索出来、点击、购买啦，相反，如果这个宝贝要等到第二天或者更久才可以被搜出来， ...
分类：
其他好文 时间：
2018-05-28 11:34:21
阅读次数：
177
移动Web开发常见问题 一、流式布局 1.1 什么是流式布局 流式布局就是百分比布局，通过盒子的宽度设置成百分比来根据屏幕的宽度来进行伸缩，不受固定像素的限制，内容向两侧填充，同时会设定最小宽度和最大宽度，适用于图片比较多的首页、门户、电商等。 在这里我们以京东的M站为例进行说明： top.png ...
分类：
移动开发 时间：
2018-05-25 13:38:47
阅读次数：
275
box-sizing属性让css布局更容易并且更直观。但是为什么它有效又被热爱，先让我们看下它的历史。 盒子模型历史 自从css诞生，盒子模型就这样默认的工作： width + padding + border = 元素被渲染的／实际可见的宽度 height + padding + border = ...
分类：
Web程序 时间：
2018-05-23 14:19:05
阅读次数：
250
在项目中需要用到流式布局的样式，此文学习鸿洋大神的FlowLayout控件，学习使用一下。出自 http://blog.csdn.net/lmj623565791/article/details/38352503 流式布局的特点： 支持setAdapter设置数据源 支持单选、多选 点击回调事件 使 ...
分类：
其他好文 时间：
2018-05-22 18:30:04
阅读次数：
1262
前言 在大数据计算领域，Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作，应用范围与前景非常广泛。在美团?大众点评，已经有很多同学在各种项目中尝试使用Spark。大多数同学 ...
分类：
其他好文 时间：
2018-05-18 20:14:40
阅读次数：
157
1. AudioSource pitch 倍速播放 默认=1 战斗有2倍速 3倍速 对应的 技能音效也有同步倍速播放的需求。 2.场景切换 背景音乐有渐变需求，借助DOTWEEN插件，需要注意的是DOFade()之前需要volume=0 audioSource.volume = 0 audioSou ...
分类：
编程语言 时间：
2018-05-16 19:49:59
阅读次数：
1004
Spark 实践——基于 Spark Streaming 的实时日志分析系统 本文基于《Spark 最佳实践》第6章 Spark 流式计算。 我们知道网站用户访问流量是不间断的，基于网站的访问日志，即 Web log 分析是典型的流式实时计算应用场景。比如百度统计，它可以做流量分析、来源分析、网站分 ...
分类：
其他好文 时间：
2018-05-15 22:43:43
阅读次数：
509
