问题分析： 1、系统页面文件（虚拟内存）占用空间 2、自动更新的缓存文件 3、系统保护的备份文件（系统还原用的） 4、休眠文件 5、索引文件6、桌面文件解决办法： 1、机器是8G内存，完全不需要虚拟内存了，于是右键计算机-〉高级系统设置-〉高级-〉性能-〉设置-〉高级-〉更改，去掉自动管...
作者：萝卜（微信：Robbie_Qi）这几天研究了一家美国的大数据公司1010data，它在产品白皮书中提出了新一代数据仓库的概念（NEXT-GENERATION DATA DISCOVERY），相对于第一代数据仓库，具有如下一些特征：l 用户可以针对任何问题进行分析和查询，也就是说，分析系统要提供...
分类：
其他好文 时间：
2015-04-13 12:30:35
阅读次数：
140
最近在忙于点云系统的构建，主要结合点云库PCL、可视化库VTK以及图像处理开源库OpenCV来做结合图像和点云数据协同的岩体分析系统。这里希望跟大家分享一下自己的整体构建流程，不足的地方希望大家能够帮忙指出以便改进。由于还在搭建过程中，所以文章的更新时间不一定，但是有关键性的进展一定会写出来讨论，谢谢大家。
整个系统构建的分析过程包括模块划分，模块之间的耦合，数据库构建，相关类的创建、继承等理论...
分类：
编程语言 时间：
2015-04-11 14:57:38
阅读次数：
1040
最近做日志分析，发现logstash较符合自己的需求，Logstash:做系统log收集，转载的工具。同时集成各类日志插件,对日志查询和分析的效率有很大的帮助。一般使用shipper作为log收集、indexer作为log转载。Logstashshipper收集log并将log转发给redis存储Logstashindexer从redis中读..
分类：
其他好文 时间：
2015-04-09 17:52:55
阅读次数：
524
Hadoop简介:
分布式、可扩展、可靠的、分布式计算框架。
组件：
common：公共组件
hdfs：分布式文件系统
yarn：运行环境
mapreduce：mr计算模型
生态系统：
Ambari:操作界面
avro：通用的序列化机制、与语言无关
cassandra:数据库
chukwa：数据收集系统
hbase:分布式大表数据库
hive：基于sql的分析系统
matout：机器学习算法库
pi...
分类：
其他好文 时间：
2015-04-05 11:59:31
阅读次数：
234
Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行，通过自己的SQL 去查询分析需要的...
分类：
数据库 时间：
2015-03-29 16:25:54
阅读次数：
301
一、什么是软件项目管理 软件项目管理是按需求确定范围、按目标制定项目计划、按计划执行管理的过程。对软件开发各阶段加强项目管理的根本目的在于增强对软件开发的控 制能力，提升软件开发的质量。软件项目的建设按软件工程的生命周期法可分为项目立项、启动、需求分析、系统设计、系统开发、系统测试、系统上线、项目....
分类：
其他好文 时间：
2015-03-28 20:22:20
阅读次数：
191
提高投标书编制工作的关键是密切结合招标需求,提交完整、详尽的资料和设计,以确保投标的实质性响应满足符合性、针对性、实用性和合理性。本文着重分析IT系统集成和软件开发项目投标书存在的问题,并对如何认真做好投标书编写工作提出若干建议,望能对提高IT采购项目投标书编制工..
分类：
其他好文 时间：
2015-03-20 14:38:32
阅读次数：
171
elk 日志分析系统Logstash+ElasticSearch+Kibana3
* logstash 管理日志和事件的工具
* ElasticSearch 搜索
* Kibana3 功能强大的数据显示客户端
* redis 缓存安装
logstash-1.4.2-1_2c0f5a1.noarch.rpm
elasticsearch-1.4.4.noarch.rpm
- logstash-...
分类：
其他好文 时间：
2015-03-20 12:59:41
阅读次数：
832
父进程fork出子进程： fork经过系统调用，来到了sys_fork，详细过程请参考Linux内核源代码情景分析-系统调用。asmlinkage int sys_fork(struct pt_regs regs)
{
return do_fork(SIGCHLD, regs.esp, ®s, 0);
}int do_fork(unsigned long clone_flags, u...
分类：
系统相关 时间：
2015-03-20 09:21:14
阅读次数：
396
