mongodb是最早热门非关系数据库的之一，使用也比较普遍，一般会用做离线数据分析来使用，放到内网的居多。由于很多公司使用了云服务，服务器默认都开放了外网地址，导致前一阵子大批 MongoDB 因配置漏洞被攻击，数据被删，引起了人们的注意，感兴趣的可以看看这篇文章：场屠戮MongoDB的盛宴反思：超 ...
分类：
数据库 时间：
2017-12-13 20:11:11
阅读次数：
236
3. 离线数据分析流程介绍 注：本环节主要感受数据分析系统的宏观概念及处理流程，初步理解hadoop等框架在其中的应用环节，不用过于关注代码细节 一个应用广泛的数据分析系统：“web日志数据挖掘” 3.1 需求分析 3.1.1 案例名称 “网站或APP点击流日志数据挖掘系统”。 3.1.2 案例需求 ...
分类：
其他好文 时间：
2017-06-17 14:24:22
阅读次数：
195
作者：纯洁的微笑出处：http://www.ityouknow.com/ 版权归作者所有，转载请注明出处 mongodb是最早热门非关系数据库的之一，使用也比较普遍，一般会用做离线数据分析来使用，放到内网的居多。由于很多公司使用了云服务，服务器默认都开放了外网地址，导致前一阵子大批 MongoDB ...
分类：
数据库 时间：
2017-05-21 21:51:07
阅读次数：
410
mongodb是最早热门非关系数据库的之一，使用也比较普遍，一般会用做离线数据分析来使用，放到内网的居多。由于很多公司使用了云服务，服务器默认都开放了外网地址，导致前一阵子大批 MongoDB 因配置...
分类：
数据库 时间：
2017-05-08 10:49:36
阅读次数：
491
hive利用hdfs存储数据文件，利用MapReduce查询数据。 数据库：支持在线联机业务（实时、事务控制） 数据仓库：存储历史数据，面向主题的。主要用于离线数据分析的。 ...
分类：
其他好文 时间：
2017-05-07 23:06:16
阅读次数：
166
1、离线数据分析流程 一个应用广泛的数据分析系统：“web日志数据挖掘” 1.1 需求分析 1.1.1 案例名称 “网站或APP点击流日志数据挖掘系统”。 1.1.2 案例需求描述 “Web点击流日志”包含着网站运营很重要的信息，通过日志分析，我们可以知道网站的访问量，哪个网页访问人数最多，哪个网页 ...
分类：
其他好文 时间：
2017-04-24 12:16:38
阅读次数：
352
近些年，大数据流式处理的讨论热了起来，就在去年，阿里巴巴想apache基金会贡献了java语言版的Jstorm，那么？为什么现在企业会越来越关注大数据的流式处理呢？仅仅对大容量的离线数据分析挖掘，已经...
分类：
其他好文 时间：
2017-01-28 11:30:35
阅读次数：
262
本周PSP 会议分工 任务（数据分析） 何为数据分析？ 答 1.按照数据分析的实时性，分为实时数据分析和离线数据分析 2.按照大数据的数据量，分为内存及别,BI级别，海量级别三种 ——————摘自人月神话的《大数据分析的分类》 本周总结： 通过这周软件工程课程的学习 ，让我认识到了大数据的实用性，以 ...
分类：
其他好文 时间：
2016-12-10 00:25:16
阅读次数：
174
为了和qq空间同步，也写的第四天，前面几天明天会发布，本来打算把每天学的东西记录下来，通过朋友给的建议要发的话稍微系统化下，从大数据需要的linux基础，到离线数据分析包括hadoop、hive、flume、hbase等,再到实时数据分析包括storm、kafka、redias等，最后的内存计算部分 ...
分类：
系统相关 时间：
2016-11-10 03:13:34
阅读次数：
347
最近利用闲暇时间，又重新研读了一下Storm。认真对比了一下Hadoop，前者更擅长的是，实时流式数据处理，后者更擅长的是基于HDFS，通过MapReduce方式的离线数据分析计算。对于Hadoop，本身不擅长实时的数据分析处理。两者的共同点都是分布式的架构，而且，都类似有主/从关系的概念。本文中我 ...
分类：
其他好文 时间：
2016-04-24 00:40:40
阅读次数：
298
