Spark正在数据处理领域卷起一场风暴。让我们通过本篇文章,看看为Spark的大数据平台起到推波助澜的几个重要工具。Spark生态系统众生相Apache Spark不仅仅让大数据处理起来更快,还让大数据处理起来更简单、功能更强大、更方便。Spark并非只是一项技术,它结合了诸多部分,新的功能和性能改 ...
分类:
其他好文 时间:
2016-05-13 10:37:29
阅读次数:
147
Zeppelin是一个Web笔记形式的交互式数据查询分析工具(类似python notebook),可以在线用scala和SQL对数据进行查询分析并生成报表。Zeppelin的后台数据引擎可以是Spark,开发者也可以通过实现更多的解释器来为Zeppelin添加数据引擎。...
分类:
其他好文 时间:
2016-05-12 23:19:43
阅读次数:
946
step1:查看1.1 Mysql命令行里输入“show engines;”查看innoddb数据引擎状态,1.2 show variables “%_buffer%”里查看innodb_buffer_pool_size的数值,默认是8M(太小,需要改大一点!)step2:找配置文件,修改innod... ...
分类:
数据库 时间:
2016-04-30 20:53:36
阅读次数:
328
mysql 从最基础的数据引擎,到进程结构,都不能支持数据版本。导致其职能阻塞“并发”,不支持最基本的事务,innodb达不到基本事务要求,任何写数据,都导致整个表锁住。充其量只能算是一个玩具,或者说和一个key->value 数据存储没有什么区别, 根本算不上是数据库(RDBMS)mysql 无法 ...
分类:
数据库 时间:
2016-04-12 14:16:49
阅读次数:
215
原文名称:7 tools to fire up Spark's big data engine
Spark正在数据处理领域卷起一场风暴。让我们通过本篇文章,看看为Spark的大数据平台起到推波助澜的几个重要工具。
Spark生态系统众生相
Apache Spark不仅仅让大数据处理起来更快,还让大数据处理起来更简单、功能更强大、更方便。Spark并非只是一...
分类:
其他好文 时间:
2016-04-05 16:21:07
阅读次数:
155
InnoDB和MyISAM是在使用MySQL最常用的两个表类型,各有优缺点,视具体应用而定。 基本的差别为: MyISAM类型不支持事务处理等高级处理,而InnoDB类型支持。 MyISAM类型的表强调的是性能,其执行数度比InnoDB类型更快,但是不提供事务支持,而InnoDB提供事务支持已经外部 ...
分类:
数据库 时间:
2016-04-04 01:27:29
阅读次数:
151
索引是有效使用数据库的基础,但你的数据量很小的时候,或许通过扫描整表来存取数据的性能还能接受,但当数据量极大时,当访问量极大时,就一定需要通过索引的辅助才能有效地存取数据。一般索引建立的好坏是性能好坏的成功关键。1.InnoDb数据与索引存储细节使用InnoDb作为数据引擎的Mysql和有聚集索引的...
分类:
数据库 时间:
2015-12-29 22:28:29
阅读次数:
340
首先需要清楚几个概念: Database engine(数据引擎):一些预先存储于数据库中的组件; Microsoft JET (Joint Engine Technology):Microsoft Jet 数据引擎,1992年发行初版,主要运用于Microsoft Accesss的数据连接,J.....
分类:
数据库 时间:
2015-12-04 22:36:04
阅读次数:
346
前言数据库存储引擎是数据库底层软件组织,数据库管理系统(DBMS)使用数据引擎进行创建、查询、更新和删除数据。不同的存储引擎提供不同的存储机制、索引技巧、锁定水平等功能,使用不同的存储引擎,还可以 获得特定的功能。现在许多不同的数据库管理系统都支持多种不同的数据引擎。MySql的核心就是存储引擎。存...
分类:
数据库 时间:
2015-11-07 12:13:40
阅读次数:
212
原文:https://mp.weixin.qq.com/s?__biz=MjM5NzAyNTE0Ng==&mid=207895956&idx=1&sn=58e8af26fd3c6025acfa5bc679d2ab01&scene=1&srcid=0919Sz0SAs6DNlHTl7GYxrGW&ke...
分类:
其他好文 时间:
2015-09-22 16:22:30
阅读次数:
238