OLTP和OLAP online transaction processing，联机事务处理。业务类系统主要供基层人员使用，进行一线业务操作，通常被称为联机事务处理。 online analytical processing，联机分析处理。数据分析的目标是探索并挖掘数据的价值，作为企业高层进行决策的 ...
分类：
其他好文 时间：
2019-10-23 20:13:20
阅读次数：
69
本文源码：GitHub·点这里||GitEE·点这里一、ClickHouse简介1、基础简介Yandex开源的数据分析的数据库，名字叫做ClickHouse，适合流式或批次入库的时序数据。ClickHouse不应该被用作通用数据库，而是作为超高性能的海量数据快速查询的分布式实时处理平台，在数据汇总查询方面(如GROUPBY)，ClickHouse的查询速度非常快。2、数据分析能力OLAP场景特征·
分类：
数据库 时间：
2019-10-22 09:16:32
阅读次数：
122
SQL查询语句 视图 索引 性能 四大范式+BFN范式 OLAP OLTP 写放大，读放大，磁盘放大 levelDB LSM树 缓存跳表 快照功能 immutable table 布隆过滤器 RocksDB column-familyMultithread compaction Single del ...
分类：
数据库 时间：
2019-10-18 12:26:05
阅读次数：
105
一.介绍 说完了前面一堆BT/PT客户端，现在终于轮到Aria2了，关于这个我就不介绍太多了，自从百度限速以来我觉得这个快变成众所周知的了，我平时也收集了各种和Aria2相关的插件或者是辅助软件之类的，就等着全部丢出来，下面请看我的表演。 二.安装 安装Aria2确实是个麻烦事，特别是要安装新的版本 ...
分类：
其他好文 时间：
2019-10-11 23:46:33
阅读次数：
439
联机分析处理 (OLAP) 的概念最早是由关系数据库之父E.F.Codd于1993年提出的，他同时提出了关于OLAP的12条准则。OLAP的提出引起了很大的反响，OLAP作为一类产品同联机事务处理 (OLTP) 明显区分开来。 当今的数据处理大致可以分成两大类：联机事务处理OLTP（on line ...
分类：
其他好文 时间：
2019-09-22 19:16:04
阅读次数：
110
1. 安装软件.net framework3.5 在安装SQL SERVER 2012前需要3.5的支持。在WIN 2012系统可以在系统管理的添加角色和功能中安装，如下将【.NET Framework 3.5功能】、【.NET Framework 4.5功能】下的组件全部勾选上。 3. 在安装以上 ...
分类：
数据库 时间：
2019-09-17 19:16:19
阅读次数：
104
因为平常只会使用kylin而不知其原理，故写下此篇文章。文章不是自己原创，是看过很多资料，查过很多博客，有自己的理解，觉得精华的部分的一个集合。算是自己对Kylin学习完的一个总结和概括吧。文章最后有链接，需要请自取。 前言 企业中的查询大致可分为即席查询和定制查询两种。很多的OLAP引擎包括Hiv ...
分类：
其他好文 时间：
2019-09-15 23:59:09
阅读次数：
178
背景介绍 Kylin 作为OLAP中主流的框架之一，其优势是在于利用Cube对数据做预计算。在离线计算的场景中，数据源为Hive表，使用Spark/MR对源数据进行折叠，将结果存储在HBase中。用户在查询的时候，元数据使用的是折叠后的维度（同步自Hive），实际查询的是HBase的结果。 这就带来 ...
分类：
其他好文 时间：
2019-09-13 12:52:11
阅读次数：
131
1.1数据仓库概念 什么是数据仓库？ 数据仓库本身并不“生产”任何数据，同时自身也不需要“消费”任何的数据，数据来源于外部，并且开放给外部应用 目的？ 构建面向分析的集成化数据环境，主要职责是做分析，对仓库里面的数据来做分析，数据分析可以支持我们做决策 数据分析特征： （1）面向主题：数据分析有一定 ...
分类：
其他好文 时间：
2019-09-04 00:28:57
阅读次数：
95
a) 数据仓库（DW） 数据库 VS 仓库 数据库面向业务存储，仓库面向主题存储 数据库针对应用（OLTP），仓库针对分析（OLAP） 数据库组织规范，仓库可能有冗余，相对变化大，数据量大 b) 检测与抓取 c) 填写、埋点、日志 d) 计算 ...
分类：
其他好文 时间：
2019-08-27 21:04:45
阅读次数：
79
