数据分析系统DIY中要完成的第二个任务。
数据采集与预处理用Dev-C++编程解决。...
分类:
数据库 时间:
2014-10-23 14:33:27
阅读次数:
343
打算通过实践,系统学习一下数据分析。
初步计划要完成的三个任务。
一、用VMware装64位CentOS,数据库服务端用CentOS自带的就好。
二、数据采集与预处理用Dev-C++编程解决。
三、用本地Win7 64上的MATLAB R2012b连接数据库进行挖掘分析。
本文就是完成第一个任务的过程。
1.先上centos 官网下载centos7的DVD is...
分类:
数据库 时间:
2014-10-21 17:51:35
阅读次数:
225
酒店评论情感分析系统(三)——将分词和去停用词后的评论文本基于“环境、卫生、价格、服务”分类思想:将进行了中文分词和去停用词之后得到的词或短语按序存在一个数组(iniArray)中,从中找出所有和“环境、卫生、价格、服务”四个方面相关的词或短语,并记录下其位置信息(sortRefNum)。然后按照位...
分类:
其他好文 时间:
2014-10-20 20:53:44
阅读次数:
311
Logstash+ElasticSearch+Kibana3架构日志系统一,分析系统简介日志监控和分析在保障业务稳定运行时,起到了很重要的作用,不过一般情况下日志都分散在各个生产服务器,且开发人员无法登陆生产服务器,这时候就需要一个集中式的日志收集装置,对日志中的关键字进行监控,触发异..
分类:
其他好文 时间:
2014-10-20 15:21:50
阅读次数:
388
事实上在大部分互联网web产品中,我们一般会用百度统计或者谷歌统计分析系统,通过在程序中引入特定的JS脚本,然后便能够在这些统计系统中看到自己站点页面详细的訪问情况。可是有些时候,因为一些特殊情况,我们须要自己来设计统计系统。因为前段时间公司的业务需求,我也是自己尝试了下,本文提供的是一个基本思路,...
分类:
Web程序 时间:
2014-10-17 15:19:17
阅读次数:
301
ASIC开发流程逻辑开发流程ASIC后端知识在ASIC设计过程中通常把需求分析、系统设计、模块设计编码、RTL仿真等过程称为前端设计;这些过程跟vendor无关,而把和vendor相关的综合功能验证、时序验证、Floorplan、电气功能、layout等称为后端设计。这里说的后端设计中一般有四个关..
分类:
其他好文 时间:
2014-10-16 21:32:54
阅读次数:
537
Hadoop日志分析系统启动脚本
#!/bin/bash
#Flume日志数据的根目录
root_path=/flume
#Mapreduce处理后的数据目录
process_path=/process
#hive分区时间
partition=`date "+%Y-%m-%d"`
#获取前一小时的时间:/YYYY-MM-DD/HH
file_path=`date -d "1 hour ...
分类:
其他好文 时间:
2014-10-16 19:41:13
阅读次数:
202
酒店评论情感分析系统(四)——LingPipe在Eclipse中的运行 本来打算在做这个项目的时候,使用基于语义的文本倾向性分析方法,即先通过对评论文本进行中文分析,去停用词,然后在倾向性语义模式库的帮助下对抽取出来的形容词或短语逐一进行倾向性判断并赋予一个倾向值,最后将上述所有倾向值累加起来得到....
分类:
系统相关 时间:
2014-10-14 20:30:09
阅读次数:
272
地位:要说数据流图首先从系统的结构化分析方法说起,结构化分析方法是一种面向数据流的需求分析方法,其基本思想是“自顶向下逐层分解”。而数据流图是结构化分析方法中的一项重要的内容。
基础:简单的说数据流图是一种分析系统数据流程的图形工具,主要从逻辑上描述系统的功能,输入,输出和数据存储。...
分类:
其他好文 时间:
2014-10-14 00:28:07
阅读次数:
198
数据流图的画法数据流图也称为数据流程图date flow diagram , DFD,是一种便于用户理解和分析系统数据流程的图形工具,他摆脱了系统和详细内容,精确的在逻辑上描写叙述系统的功能、输入、输出和数据存储等,是系统逻辑模型的重要组成部分。数据流图的基本组成成分数据流:是由一组固定成分的数据组...
分类:
其他好文 时间:
2014-10-12 14:29:28
阅读次数:
205