之前将storage文件夹(背后是挂载的整块新硬盘)通过samba服务与Windows共享。之所以先共享,是为了完成FTP后方便文件管理。软件:vsftpd目标:让用户登录FTP后可以上传文件(主要用于iPhone照片备份),不同用户备份在各自的文件夹下。Windows下打开共享的storage文件夹可以看..
项目中要模拟openstack的swift的多路write功能。初步设想是用python的eventlet来实现多线程。比如在write的时候要同时写入两个storage,就用eventlet生成2个线程,两个线程并行的去write,各自返回。但是我刚才在查eventlet的时候发现eventlet...
分类:
其他好文 时间:
2014-09-04 22:14:10
阅读次数:
251
1.DAS: 开放系统的直连式存储(Direct-Attached Storage),直连式存储与服务器主机之间的连接通道通常采用SCSI连接 //随着服务器CPU的处理能力越来越强,存储硬盘空间越来越大,阵列的硬盘数量越来越多,SCSI通道将...
分类:
其他好文 时间:
2014-09-04 17:13:40
阅读次数:
182
Core Data是iOS中很重要的一个部分,可以理解为基于SQLite(当然也可以是其他的Storage,如In-memory,只是SQLite比较常见)的一个ORM实现,所以有关系数据库的特性,又不用写SQL。顺便吐一下槽,官方说法是使用Core Data能减少50%-70%的代码量,但相信用过...
分类:
移动开发 时间:
2014-09-04 13:06:49
阅读次数:
308
线程局部存储(ThreadLocalStorage),简称TLS,提供了一种存储线程私有数据的方式,每个线程的私有数据对其他线程均不可见。Chromium是一个多进程多线程架构的浏览器,运行时会创建多达30几个线程,其中很多线程需要拥有自己私有数据,在TLS数量有限的系统上,例如Android4.3或更..
分类:
移动开发 时间:
2014-09-04 03:04:08
阅读次数:
1067
spark对内存有一定的要求,内存不够会因为gc而oom。
1、默认情况下,一个worker的内存0.6用于cache,0.4用于task,可以通过设置该值提高每个worker的cache大小
spark.storage.memoryFraction 0.8
2、设置并行task数,提高reducer效率
spark.default.parallelism 4
这个在1....
分类:
其他好文 时间:
2014-09-03 21:21:47
阅读次数:
338
Object Storage UploaderOverviewWe’ve recently added the option to import customer-supplied Virtual Hard Disks (VHDs) to our object storage offering. T...
分类:
其他好文 时间:
2014-09-03 16:39:26
阅读次数:
205
本文转自:http://blogs.msdn.com/b/azchina/archive/2010/03/11/windows-azure-table-storage.aspx本文是Windows Azure入门教学的第六篇文章。本文将会介绍如何使用Table Storage。Table Stora...
16.4 存储结构化数据 前面我们看到,使用Storage保存key-value对时,key、value都只能是字符串,这对于简单数据来说已经足够了。但如果需要保存更复杂的数据, 比如保存类似于表记录的数据,因此可以结合前面介绍过的JSON知识。 我们可以考虑按如下步骤来存储结构...
分类:
其他好文 时间:
2014-09-01 19:03:43
阅读次数:
180