为了让前面规划的互联网+数据平台能有效对电子商务数据进行管理及实现大数据统计功能,必须在平台上再增加一个MongDB-Engine:数据平台用户通过传入一种Context来指示MongoDB-Engine运算。与前面JDBC-Engine和Cassandra-Engine通过文本式传递指令不同的是: ...
分类:
数据库 时间:
2018-03-08 14:05:45
阅读次数:
202
Spring Boot中除了对常用的关系型数据库提供了优秀的自动化支持之外,对于很多NoSQL数据库一样提供了自动化配置的支持,包括:Redis, MongoDB, Elasticsearch, Solr和Cassandra。 使用Redis Redis是一个开源的使用ANSI C语言编写、支持网络 ...
分类:
数据库 时间:
2018-03-08 10:36:09
阅读次数:
194
一:Nosql的分类 1.KV键值:典型介绍 新浪:BerkeleyDB+redis 美团:redis+tair 阿里、百度:memcache+redis 2.文档型数据库(bson格式比较多):典型介绍 CouchDB MongoDB 3.列存储数据库 Cassandra, HBase 分布式文件 ...
分类:
其他好文 时间:
2018-02-27 19:20:41
阅读次数:
146
2016年5月中旬,由于急着项目上线,cassandra3.4版本在没有很多测试的情况下就使用了,当时部署在3台16G的windows系统服务器上。几个月使用下来,多数问题都是OOM导致的宕机 。特别是有一次宕机,在重启数据库后发现内存不断上升,多次重启也都是如此。通过观察判断可能原因是数据库采取的 ...
主要介绍Hadoop家族产品,常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa,新增加的项目包括,YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, ...
分类:
其他好文 时间:
2018-02-23 10:44:33
阅读次数:
205
现代信息系统应该是避不开大数据处理的。作为一个通用的系统集成工具也必须具备大数据存储和读取能力。cassandra是一种分布式的数据库,具备了分布式数据库高可用性(high-availability)特性,对于一个实时大型分布式集成系统来说是核心支柱。与传统的关系数据库对比,cassandra从数据 ...
分类:
数据库 时间:
2018-02-22 10:51:24
阅读次数:
245
Twitter的分布式自增ID算法snowflake (Java版) ...
分类:
编程语言 时间:
2018-02-01 14:55:00
阅读次数:
129
由于公司项目使用了Cassandra进行数据的存储,查看数据的时候,每次都要在命令行操作,既麻烦看起来效果也不好。所以就在网上找了下面几个图形化工具: 1.DbSchema 2.RazorSQL 3.DBeaver 其中,DBeaver是免费的,另外两个需要购买。但是DBeaver是不支持Cassa ...
分类:
数据库 时间:
2018-02-01 13:13:16
阅读次数:
857
cassandra: partition分区器有两种方法:<!--?xml version="1.0" encoding="UTF-8"?--> RandomPartitioner 一致性哈希 <!--?xml version="1.0" encoding="UTF-8"?--> ByteOrder ...
分类:
其他好文 时间:
2018-01-15 00:17:21
阅读次数:
1523
1、优化方式 硬件优化=》系统优化=》mysql配置优化=》SCHEMA优化=》sql优化=》其他解决方案(redis or MongoDB or Cassandra or HBase) 2、mysql配置分析 1)常见瓶颈 90%系统瓶颈都在IO上,所以提高IOPS尤为总要,iowait过高,加内 ...
分类:
数据库 时间:
2018-01-06 19:07:48
阅读次数:
224