大数据时代，企业对于DBA也提出更高的需求。同时，NoSQL作为近几年新崛起的一门技术，也受到越来越多的关注。本文将基于个推SRA孟显耀先生所负责的DBA工作，和大数据运维相关经验，分享两大方向内容：一、公司在KV存储上的架构演进以及运维需要解决的问题；二、对NoSQL如何选型以及未来发展的一些思考 ...
分类：
数据库 时间：
2019-01-12 18:03:51
阅读次数：
235
MongoDB简介 MongoDB是一个基于分布式文件存储的数据库，它是一个介于关系数据库和非关系数据库之间的产品，其主要目标是在键/值存储方式（提供了高性能和高度伸缩性）和传统的RDBMS系统（具有丰富的功能）之间架起一座桥梁，它集两者的优势于一身。 MongoDB支持的数据结构非常松散，是类似j ...
分类：
数据库 时间：
2019-01-08 17:14:30
阅读次数：
115
问题定位：每天晚上十点的时候运行自动SQL优化的任务时报错内存不足。 alert报错： Errors in file /u01/app/oracle/diag/rdbms/cpty/cpty/trace/cpty_j003_28000.trc (incident=28312):ORA-04030: ...
分类：
数据库 时间：
2019-01-07 10:32:03
阅读次数：
328
MySql介绍 标签（空格分隔）： MySql MySQL是一个关系型数据库管理系统，由瑞典MySQL AB 公司开发，目前属于 Oracle 旗下公司。MySQL 最流行的关系型数据库管理系统，在 WEB 应用方面MySQL是最好的 RDBMS (Relational Database Manag ...
分类：
数据库 时间：
2019-01-05 22:54:15
阅读次数：
259
是一个并行计算框架（计算的数据源比较广泛 HDFS、RDBMS、NoSQL），Hadoop的 MR模块充分利用了HDFS中所有数据节点（datanode）所在机器的内存、CUP以及少量磁盘完成对大数据集的分布式计算。MapReduce将计算分为两个阶段： 1. 通过将一个大的计算任务分割成若干个小任 ...
分类：
其他好文 时间：
2019-01-04 21:59:10
阅读次数：
207
数据采集：采用Flume收集日志，采用Sqoop将RDBMS以及NoSQL中的数据同步到HDFS上 消息系统：可以加入Kafka防止数据丢失 实时计算：实时计算使用Spark Streaming消费Kafka中收集的日志数据，实时计算结果大多保存在Redis中 机器学习：使用了Spark MLlib ...
分类：
其他好文 时间：
2019-01-04 14:49:53
阅读次数：
154
Oracle 11G RAC For Windows 2008 R2部署手册（亲测，成功实施多次） https://www.cnblogs.com/yhfssp/p/7821593.html 总体规划 服务器规划 1、建议使用两台硬件配置一模一样的服务器来作为 RAC 环境的两个物理节点 2、服务器 ...
分类：
数据库 时间：
2018-12-22 13:54:28
阅读次数：
393
最近更新时间：2018/12/18适用场景数据库升级、快速构建测试环境、DG中重建主库前置条件1. ARCHIVELOG 模式数据为在 mount 状态下开启：ALTER DATABASE ARCHIVELOG;SQL> archive log list;Database log mode Arch... ...
分类：
数据库 时间：
2018-12-19 18:41:17
阅读次数：
157
MySQL 是一个强大的开源关系数据库管理系统（简称 RDBMS）。它发布于 1995 年（20年前）。它采用结构化查询语言（SQL），这可能是数据库内容管理中最流行的选择。最新的 MySQL 版本是 5.6.25，于 2015 年 5 月 29 日发布。 关于 MySQL 一个有趣的事实是它的名字 ...
分类：
数据库 时间：
2018-12-16 19:27:37
阅读次数：
238
MySQL是一个关系型数据库管理系统，由瑞典MySQLAB公司开发，目前属于Oracle旗下产品。MySQL是最流行的关系型数据库管理系统之一，在WEB应用方面，MySQL是最好的RDBMS(RelationalDatabaseManagementSystem，关系数据库管理系统)应用软件。MySQL是一种关系数据库管理系统，关系数据库将数据保存在不同的表中，而不是将所有数据放在一个大仓库内，这样
分类：
数据库 时间：
2018-12-07 21:05:04
阅读次数：
181
