linux三剑客awk、sed、grep1、awk主要用来做分列、匹配、计算的工作2、sed主要用来做替换的（流处理）3、grep主要用来过滤出需要的文本awk（默认的分隔符为空格）awk-F":"‘/bonzi/{if(NR==2)print$0}‘（一般模式）-F设置分隔符，可以设置多个分隔符-F"[:!]+"NR表示行号$NF表示..
分类：
系统相关 时间：
2016-11-14 02:41:34
阅读次数：
179
linux三剑客awk、sed、grep1、awk主要用来做分列、匹配、计算的工作2、sed主要用来做替换的（流处理）3、grep主要用来过滤出需要的文本awk（默认的分隔符为空格）awk-F":"‘/bonzi/{if(NR==2)print$0}‘（一般模式）-F设置分隔符，可以设置多个分隔符-F"[:!]+"NR表示行号$NF表示..
分类：
系统相关 时间：
2016-11-14 02:40:20
阅读次数：
228
一：Spark Streaming Job生成深度思考
1. 做大数据例如Hadoop,Spark等，如果不是流处理的话，一般会有定时任务。例如10分钟触发一次，1个小时触发一次，这就是做流处理的...
分类：
其他好文 时间：
2016-11-06 23:02:51
阅读次数：
475
窗口算子WindowOperator是窗口机制的底层实现，它几乎会牵扯到所有窗口相关的知识点，因此相对复杂。本文将以由面及点的方式来分析WindowOperator的实现。
分类：
其他好文 时间：
2016-11-05 09:46:22
阅读次数：
267
NSQ是由四个重要组件构成： nsqd：一个负责接收、排队、转发消息到客户端的守护进程 nsqlookupd：管理拓扑信息并提供最终一致性的发现服务的守护进程 nsqadmin：一套Web用户界面，可实时查看集群的统计数据和执行各种各样的管理任务 utilities：常见基础功能、数据流处理工具，如 ...
分类：
其他好文 时间：
2016-11-05 07:39:18
阅读次数：
268
纵骑横飞 章仕烜 首先我们来看一下 DataOutputStream /** * A data output stream lets an application write primitive Java data * types to an output stream in a portable ...
分类：
移动开发 时间：
2016-10-25 09:26:27
阅读次数：
252
基础知识 Storm是一个分布式的，可靠的，容错的数据流处理系统。它会把工作任务委托给不同类型的组件，每个组件负责处理一项简单特定的任务。Storm集群的输入流由一个被称作spout的组件管理，spout把数据传递给bolt， bolt要么把数据保存到某种存储器，要么把数据传递给其它的bolt。你可 ...
流的分类 依据方向分类，分为输入流和输出流。 依据读写单位，分为字符流和字节流。 依据功能不同，分为节点流，处理流。 所谓的输入与输出 输入输出的参考系是程序，比如说从文件读取，这叫做输入，程序写文件，这叫输出。 节点流 字节流 字符流的单位是一个一个字节字节读取的，每一次读取一个。 字符流 字符流 ...
分类：
编程语言 时间：
2016-10-08 02:17:15
阅读次数：
115
概述1.File类字段摘要构造方法概述1. File类2. IO流的原理以及概念3. IO流的体系4. 字节流和字符流5. 处理流6. 文件拷贝 7. 文件分割与合并1.File类File类是文件和目录路径名的抽象形式.一个File对象可以代表一个文件或目录,但是不是完全对应的.File类对象主要用... ...
分类：
编程语言 时间：
2016-10-04 18:51:23
阅读次数：
148
IO流：★★★★★，用于处理设备上数据。流：可以理解数据的流动，就是一个数据流。IO流最终要以对象来体现，对象都存在IO包中。流也进行分类：1：输入流（读）和输出流（写）。2：因为处理的数据不同，分为字节流和字符流。 字节流：处理字节数据的流对象。设备上的数据无论是图片或者dvd，文字，它们都以二进... ...
分类：
其他好文 时间：
2016-10-01 22:19:44
阅读次数：
207
