Flume应用开发 要求: Flume应用场景Flume的核心是把数据从数据源收集过来,在送到目的地。为了保证输送一定成功,发送到目的地之前,会先缓存数据,待数据真正的到达目的地后,删除自己缓存的数据。Flume采用流式方法采集和传输数据,程序配置好后,不需要外部条件触发下,一直监控数据源,源源不断 ...
分类:
Web程序 时间:
2019-07-28 17:10:09
阅读次数:
140
console控制台:使用<winsock2.h> 和 ws2_32.lib MFC的Socket通信:使用 ...
分类:
编程语言 时间:
2019-07-27 17:12:25
阅读次数:
128
NBI一站式大数据可视化分析平台是一款基于B/S架构的数据可视化构建平台,NBI大数据平台的设计理念是提供简单、快速、可控、可交互为目的的数据可视化产品。NBI大数据平台支持多种数据源无缝连接,能快速整合数据;在NBI大数据平台中,我们封装了多达二三十种数据可视化组件供用户使用,提供了丰富的组件属性配置,让图表更具表现力,同时提供了拖拽式操作方式,用户可以任意DIY数据可视化报告;NBI大数据可视化平台支持两种布局模式:(1)自由式布局和(2)流式布局方式供用户使用几分钟即可做好数据可视化分析,极大的降低了人力、物力的投入
分类:
编程语言 时间:
2019-07-26 13:12:50
阅读次数:
122
流指的是数据流,指的是数据是分片传输, 数据可以实现非阻塞 gulp 【 流式操作 】 案例: 打包压缩包 流程: 读取文件 const fs=require('fs') 2. 创建压缩包 const zlib=require('zlib') const inp=fs.createReadStrea ...
分类:
其他好文 时间:
2019-07-17 20:45:33
阅读次数:
136
一、前言 二、主要内容 1、移动端面对的问题:因为手机屏幕和尺寸不一样,当我们用不同手机设备浏览的时候为了提高用户体验必须要做移动端适配 2、解决方案一: 流式布局 + viewport视口进行设置 流式布局:就是百分比布局,非固定像素,内容向两侧填充,理解成流动的布局,称为流式布局*/ <!DOC ...
分类:
移动开发 时间:
2019-07-17 00:17:06
阅读次数:
182
什么是大数据?举例:1、商品推荐:问题:(1)大量的订单如何存储?(2)大量的订单如何计算?2、天气预报:问题:(1)大量的天气数据如何存储?(2)大量的天气数据如何计算?如果你想要学好大数据最好加入一个好的学习环境,可以来这个Q群251956502这样大家学习的话就比较方便,还能够共同交流和分享资料什么是大数据,本质?(1)数据的存储:分布式文件系统(分布式存储)(2)数据的计算:分布式计算Ja
分类:
其他好文 时间:
2019-07-15 15:58:47
阅读次数:
116
HDFS写流程 Client 切分文件Block 按Block线性和NN获取DN列表(副本数) 验证DN列表后以更小的单位流式传输数据 各节点,两两通信确定可用 Block传输结束后 DN向NN汇报Block信息 DN向Client汇报完成 Client向NN汇报完成 获取下一个Block存放的DN ...
分类:
其他好文 时间:
2019-07-14 12:41:34
阅读次数:
95
socket套接字编程 套接字介绍 1. 套接字 : 实现网络编程进行数据传输的一种技术手段 2. Python实现套接字编程:import socket 3. 套接字分类 >流式套接字(SOCK_STREAM): 以字节流方式传输数据,实现tcp网络传输方案。(面向连接--tcp协议--可靠的-- ...
分类:
Web程序 时间:
2019-07-13 20:01:56
阅读次数:
165
Kafka是什么 在流式计算中,Kafka一般用来缓存数据,Storm通过消费Kafka的数据进行计算。 1)Apache Kafka是一个开源消息系统,由Scala写成。是由Apache软件基金会开发的一个开源消息系统项目。 2)Kafka最初是由LinkedIn公司开发,并于 2011年初开源。 ...
分类:
其他好文 时间:
2019-07-11 12:25:26
阅读次数:
128