码迷,mamicode.com
首页 >  
搜索关键字:Avro    ( 178个结果
netty深入学习之中的一个: 入门篇
netty深入学习之中的一个: 入门篇本文代码下载:http://download.csdn.net/detail/cheungmine/84975491)Netty是什么Netty是Java NIO之上的网络库(API)。Netty 提供异步的、事件驱动的网络应用程序框架和工具,用以高速开发高性能 ...
分类:Web程序   时间:2017-04-16 19:16:15    阅读次数:257
Flume NG 学习笔记(四)Source配置
首先、这节水的东西就比较少了,大部分是例子。一、AvroSource与ThriftSourceAvro端口监听并接收来自外部的Avro客户流的事件。当内置Avro去Sinks另一个配对Flume代理,它就可以创建分层采集的拓扑结构。官网说的比较绕,当然我的翻译也很弱,其实就是flume可以多级代理,然后代..
分类:Web程序   时间:2017-03-15 19:23:56    阅读次数:257
java原生序列化和Kryo序列化性能比较
简介 最近几年,各种新的高效序列化方式层出不穷,不断刷新序列化性能的上限,最典型的包括: 专门针对Java语言的:Kryo,FST等等 跨语言的:Protostuff,ProtoBuf,Thrift,Avro,MsgPack等等 这些序列化方式的性能多数都显著优于hessian2(甚至包括尚未成熟的 ...
分类:编程语言   时间:2017-01-22 22:33:15    阅读次数:1056
Flume Source 实例
Avro Source 监听avro端口,接收外部avro客户端数据流。跟前面的agent的Avro Sink可以组成多层拓扑结构。 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 a1.sources=s1 a1.sinks=k1 a1.channels=c1 a1. ...
分类:Web程序   时间:2017-01-13 23:33:38    阅读次数:368
精彩解密大数据之精绝古城
Avroschema作为大数据一个项目,它可以算得上精品中的上等品,让学习或者想要学习大数据的人为之倾倒,不断挖掘学习,那么它究竟有着怎样的神秘面纱呢?我们一起来揭开!为了理解Avro,首先要理解序列化。序列化是在内存里表述数据的一种方式,它是一连串的字节,可以保存数据..
分类:其他好文   时间:2017-01-10 10:23:04    阅读次数:226
Hadoop生态系统
a b c d e f g h i j k l m no p q r s t u v w x y zhttp://ambari.apache.org/http://avro.apache.org/http://cassandra.apache.org/http://chukwa.apache.org... ...
分类:其他好文   时间:2016-12-12 14:48:24    阅读次数:173
RocketMQ生产者示例程序
转载请注明出处:http://www.cnblogs.com/xiaodf/ 本示例展示了一个RocketMQ producer的简单实现,通过解析文本文件获取输入数据,将数据经过Avro序列化后发送到RocketMQ。 程序通过stdin.xml配置文件获取主要参数值,stdin.xml文件内容如 ...
分类:其他好文   时间:2016-10-26 14:13:45    阅读次数:282
2016年大数据Spark“蘑菇云”行动之flume整合spark streaming
近期,听了王家林老师的2016年大数据Spark“蘑菇云”行动,需要将flume,kafka和Sparkstreaming进行整合。感觉一时难以上手,还是先从简单着手吧:我的思路是这样的,flume产生数据,然后输出到sparkstreaming,flume的源数据是netcat(地址:localhost,端口22222),输出是av..
分类:Web程序   时间:2016-10-01 06:31:51    阅读次数:209
基于Zookeeper的分步式队列系统集成案例
基于Zookeeper的分步式队列系统集成案例 Hadoop家族系列文章,主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hca ...
分类:其他好文   时间:2016-09-21 10:13:51    阅读次数:253
Hadoop之AVRO
Avro是个支持多语言的数据序列化框架,支持c,c++,c#,python,java,php,ruby,java。他的诞生主要是为了弥补Writable只支持java语言的缺陷。1AVRO简介很多人会问类似的框架还有Thrift和Protocol,那为什么不使用这些框架,而要重新建一个框架呢,或者说Avro有哪些不同。首..
分类:其他好文   时间:2016-09-02 01:01:09    阅读次数:187
178条   上一页 1 ... 7 8 9 10 11 ... 18 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!