额达到数十亿美元。在Newegg,每天有数以千万计的用户浏览商品,并产生下单交易等后续操作。我们构建的数据系统,必须应对日益增大的数据量,具备健壮性、可靠性。目前,我们采用Cassandra来构建Newegg的下一代在线系统。 Cassandra是无单点失败的分布式存储系统,具有很好的并发写入性能和
分类:
其他好文 时间:
2016-02-04 13:20:16
阅读次数:
288
在spark-shell中将数据保存到cassandra:var data = normalfill.map(line => line.split("\u0005"))data.map( line => (line(0), line(1), line(2))) ).saveToCassandra( ...
分类:
其他好文 时间:
2016-01-21 19:49:38
阅读次数:
450
NoSQL泛指非关系型数据库,诸如Cassandra、MongoDB、Neo4J和Riak等。它们主张使用无模式(schemaless)的数据,可以运行在集群环境中。数据分布的两种方式:1.将不同的数据分片放在多个服务器中,每一个数据子集(subset of data)都专门由一台服务器负责。2.将...
分类:
数据库 时间:
2016-01-16 11:54:08
阅读次数:
224
1、准备一个5节点的cassandra集群略node1,node2,node3,node4,node52、在node1上下载prestowgethttps://repo1.maven.org/maven2/com/facebook/presto/presto-server/0.131/presto-server-0.131.tar.gz3、解压缩tarzxvfpresto-server-0.131.tar.gzmvpresto-server-0.131/presto4..
分类:
数据库 时间:
2015-12-22 19:46:39
阅读次数:
519
Spark能够从任何支持Hadoop的存储源来创建RDD,包括本地的文件系统,HDFS,Cassandra,Hbase,Amazon S3等。Spark支持textFile、SequenceFiles和任何其他的Hadoop的InputFormat格式的数据。1、textfile的RDD可以通过.....
分类:
其他好文 时间:
2015-12-21 17:39:56
阅读次数:
125
Cassandra 是什么?Apache Cassandra 以其可扩展性和容错分布式数据库系统而被人所熟知。Cassandra 起源于Facebook 最初创建于 Amazon Dynamo 和谷歌 BigTable 的一个项目,并从此成长为一个在苹果和 Netflix 等公司大量使用的开源系统。...
分类:
其他好文 时间:
2015-12-18 16:18:36
阅读次数:
191
注:本文转自:http://eric100.blog.51cto.com/2535573/1717792Opscenter用户手册1.OpsCenter简介DataStaxOpsCenter是一个可视化管理和监控Apache Cassandra和DataStax Enterprise工具。OpsCe...
分类:
其他好文 时间:
2015-12-15 12:12:18
阅读次数:
247
In cassandra 2.1.4, if you run "nodetool status" without any keyspace specified, you will get a Note:?123456789$ nodetool statusDatacenter: datacenter...
分类:
其他好文 时间:
2015-12-14 22:54:54
阅读次数:
993
配置好eclipse连接hadoop:参考:http://www.powerxing.com/hadoop-build-project-using-eclipse/ http://blog.csdn.net/dandingyy/article/details/7357619如果hdfs文件目录显.....
分类:
系统相关 时间:
2015-11-30 20:23:18
阅读次数:
171
cassandra client是基于Apache Thrift这个RPC框架来进行客户端和服务器的通信。 首先到$CASSANDRA_HOME\lib目录下导入apache-cassandra-thrift-2.1.11.jar,libthrift-0.9.2.jar这两个包,然后再导入...
分类:
编程语言 时间:
2015-11-29 13:33:55
阅读次数:
204