HDFS配置:
客户端中的配置参数可以覆盖服务端的参数。
例如:副本数,切块大小
HDFS文件存储:
服务端存储block的实际大小,但是不适合存储小文件,小文件会占用namenode的元数据空间。
对于小文件数据的优化,可以在上传之前先合并再上传。
例如:压缩、文本文件合并
HDFS扩展:
hdfs支持rest API,与平台无关
jetty 容器
hdfs支持rest command
分布式任务...
分类:
其他好文 时间:
2015-04-11 22:38:55
阅读次数:
180
我们在建网站时经常会用js特效代码以使页面更美观,比如js幻灯片代码、js下拉菜单等,但是网页特效一多,如果js文件没有合并的话会降低网站的性能,这时我们就要考虑合并js文件了,ytkah总结了以下几种方法可以实现: 1.把不输出(没有document.write)的公共函数合到一起,如果单纯...
分类:
Web程序 时间:
2015-04-10 13:01:48
阅读次数:
170
packagecn.mytext.ref;importjava.io.BufferedInputStream;importjava.io.BufferedOutputStream;importjava.io.File;importjava.io.FileInputStream;importjava.io.FileNotFoundException;importjava.io.FileOutputStream;importjava.io.IOException;importjava.io.PrintStream..
分类:
其他好文 时间:
2015-04-10 07:10:53
阅读次数:
144
归并操作:是将两个有序独立的文件合并成为一个有序文件的过程。
归并排序:和快速排序的过程相反,它是两个递归调用(排序子文件)后是一个归并的过程。
快速排序时,先分解成两个子问题后是两个递归调用(排序子文件)的过程。归并操作
1 基本的两路归并
2 抽象原位归并
归并排序
1 自顶向下的归并排序
2 自底向上的归并排序
3 归并排序的性能特征
归并排序的链表实现
归并排序与快速排序对比
1. 归并...
分类:
编程语言 时间:
2015-03-30 09:36:46
阅读次数:
250
Jar是在发布Java应用程序时用到的一种文件格式。
JAR是 Java Archive File的缩写,是 Java 的一种文档格式,可将多个文件合并为单个JAR归档文件,jar是个多用途的存档及压缩工具,它基于ZIP和ZLIB压缩格式。JAR 文件非常类似 ZIP 文件,准确的说,它就是 ZIP 文件。JAR 文件与 ZIP 文件唯一的区别就是在 JAR 文件的内容中,包含了一个 MET...
分类:
编程语言 时间:
2015-03-29 13:45:12
阅读次数:
278
(1)两个文件的交集,并集前提条件:每个文件中不得有重复行1. 取出两个文件的并集(重复的行只保留一份)cat file1 file2 | sort | uniq > file32. 取出两个文件的交集(只留下同时存在于两个文件中的文件)cat file1 file2 | sort | uniq -...
分类:
系统相关 时间:
2015-03-18 19:51:04
阅读次数:
194
合并两个文件 源代码下载地址:http://www.zuidaima.com/share/1550463699438592.htm...
分类:
其他好文 时间:
2015-03-13 10:54:18
阅读次数:
94
最近在对页面做性能方面的优化,主要记录一下可用的优化方案:1.合并文件以减少http请求 实现方式: 1)将多个js,css文件合并为一个文件 2)将js,css文件的路径合并,用逗号分隔如:http://a.tbcdn.cn/??s/kissy/1.1.6/kissy-min.js,p/et...
分类:
其他好文 时间:
2015-03-06 16:16:06
阅读次数:
120
如需转载请标明出处:http://blog.csdn.net/itas109
QQ技术交流群:129518033
下载了网易公开课的视频之后,发现它的中文和英文字母是分开的,用其他播放器打开的时候只能载入一个字幕,于是就想合并2个文件
思路:
假定英文字幕的文件名叫1.srt,中文字幕的文件名叫2.srt,新合并的文件名叫3.srt。假设起始行为1。
读取1.srt中的...
分类:
其他好文 时间:
2015-03-06 11:21:16
阅读次数:
149
首先遍历文件夹下所有文件,然后再进行合并遍历文件def traverse_dir(file_path) if File.directory? file_path Dir.foreach(file_path) do |file| if file !="." and file !=".." traver...
分类:
其他好文 时间:
2015-03-05 18:43:22
阅读次数:
168