[toc] "项目的Github地址" 需求介绍 为了缩短用户看到首页信息的时间, 我们把首页显示的类目信息, 广告等数据放到Redis缓存中, 这样就不用通过耗时的数据库操作获取数据, 而是直接从Redis缓存中获取. 在开始之前先记录一个坑: 重启虚拟机后nginx服务器关闭了, 导致nginx ...
分类：
编程语言 时间：
2019-05-18 10:02:41
阅读次数：
192
一、概述Ceph是可靠的、可扩展的、统一的、开源分布式的存储系统。可以同时提供对象存RADOSGW（Reliable、Autonomic、Distributed、ObjectStorageGateway）、块存储RBD（RadosBlockDevice）、文件系统存储CephFS（CephFilesystem）3种功能。 Ceph是一个开源的分布式文件系统。因为它还支持块存储、对象存储，所以很自
分类：
其他好文 时间：
2019-05-14 00:43:07
阅读次数：
124
传统制造企业随着企业数字化转型，通过一系列的信息化建设，正在逐步走向智能制造阶段。此过程中，企业首要面临的是信息数据的管理和存储问题。本文主要介绍如何通过Ceph分布式存储一体机解决企业信息数据管理优势和今后如何应对大数据的分析。目前制造企业分布式存储方案的不足?随着制造企业的信息化程度不断加强，每日产生的文本、图像、视频、备份数据、日志信息等之间有着非常强的关联性且来源多种多样，这些数据对于产品
分类：
其他好文 时间：
2019-05-13 16:36:45
阅读次数：
143
1.HBase是一个分布式的、面向列的开源数据库，该技术来源于 Fay Chang 所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统（File System）所提供的分布式数据存储一样，HBase在Hadoop之上提供了类似 ...
分类：
其他好文 时间：
2019-05-10 23:31:47
阅读次数：
210
去年11月底，结束了上一份工作，在家待业5个月，很充实。 不记得从哪里看到的理论了，说是：形式好时，努力借势发展；形式不好时，努力提升个人。 我觉得很有道理，就照着做了，积极看书，有些以前看过的，有价值的，又看了第二遍。 整理完读书清单，很有成就感。 这段时间，是我毕业十年，感觉最充实的，心态最积极 ...
分类：
其他好文 时间：
2019-05-06 17:25:50
阅读次数：
146
https://www.cnblogs.com/kevingrace/p/8471827.html 一、分布式文件系统介绍分布式文件系统：Distributed file system, DFS，又叫做网络文件系统：Network File System。一种允许文件通过网络在多台主机上分享的文件系 ...
分类：
系统相关 时间：
2019-05-03 11:18:31
阅读次数：
193
大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架，主要分为下面几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。在这里还是要推荐下我自己建的大数据学习交流群:529867072，群里都是学大数据开发的，如果你正在学习大数据，小
分类：
其他好文 时间：
2019-05-01 11:57:36
阅读次数：
141
1、Storm与Kafka集成 我们知道storm的作用主要是进行流式计算，对于源源不断的均匀数据流流入处理是非常有效的， 而现实生活中大部分场景并不是均匀的数据流，而是时而多时而少的数据流入，这种情况下显然用批量处理是不合适的， 如果使用storm做实时计算的话可能因为数据拥堵而导致服务器挂掉，应 ...
分类：
其他好文 时间：
2019-04-26 11:28:06
阅读次数：
153
大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架，主要分为下面几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。 一、数据采集 ...
分类：
其他好文 时间：
2019-04-23 15:39:37
阅读次数：
163
在 2006 年的 OSDI 上，Google 发布了名为 Bigtable: A Distributed Storage System for Structured Data 的论文，其中描述了一个用于管理结构化数据的分布式存储系统 Bigtable 的数据模型、接口以及实现等 ...
分类：
数据库 时间：
2019-04-17 09:52:54
阅读次数：
185
