介绍 MongoDB属于NoSql的一种,且是属于NoSql中的基于分布式文件存储的文档型数据库。由C++语言编写,旨在为WEB应用提供可扩展的高性能数据存储解决方案。 特点 MongoDB特点是高性能、易部署、易使用,存储数据非常方便,最大的特点在于它支持的查询语言非常强大,其语法有点类似于面向对 ...
分类:
数据库 时间:
2019-08-27 19:36:40
阅读次数:
126
有3个配置文件,所在的目录:/etc/fdfs 复制上面的3个文件,文件名去掉sample 修改tracker.conf配置文件 1,设置有效 2,绑定IP地址,不设置代表本机的所有IP地址 3,修改端口号 4,修改数据和日志的目录 修改storage.conf配置文件(存储节点) 1, 2, 3, ...
分类:
其他好文 时间:
2019-08-27 19:03:29
阅读次数:
93
1.服务端与客户端建立公钥及私钥信任关系。服务端作为原始文件存储地,ansible主机。2.相关脚本定义
分类:
系统相关 时间:
2019-08-26 22:45:59
阅读次数:
156
Hadoop 中有三大组件:HDFS、MapReduce、YARN,HDFS 负责大文件存储的问题,MapReduce 负责大数据计算,而 YARN 负责资源的调度,接下来的文章我会一一介绍这几个组件。今天我们先来聊聊 HDFS 的架构及文件的读写流程。 总体架构 HDFS 设计的目的是为了存储大数 ...
分类:
其他好文 时间:
2019-08-24 16:56:05
阅读次数:
103
存储分类:直连式存储,集中式共享存储,分布式存储文件存储,块存储,对象存储DAS,NAS,SANDAS属于直连式存储,将存储设备通过SCSI接口或者光纤通道直接和主板连接,不能实现数据共享NAS和SAN属于集中式共享存储NAS使用NFS和CIFS(原来叫SMB,微软的)协议SAN分为FCSAN和IPSANIPSAN使用iSCSI技术NFS实现linux之间共享,smaba基于CIFS协议,实现li
分类:
其他好文 时间:
2019-08-22 12:43:25
阅读次数:
149
一、架构 Ceph在一个统一的系统中独特地提供对象,块和文件存储。 Ceph高度可靠,易于管理且免费。 Ceph的强大功能可以改变您公司的IT基础架构以及管理大量数据的能力。 Ceph提供了非凡的可扩展性 - 成千上万的客户端访问数PB到数十亿的数据。 Ceph节点利用商用硬件和智能守护进程,Cep ...
分类:
其他好文 时间:
2019-08-20 18:51:18
阅读次数:
78
urllib基础 urlretrieve() urlretrieve(网址,本地文件存储地址) 直接下载网页到本地 urlcleanup() 清除缓存 info() 查看网页简介 getcode() 输出网页爬取状态码,200为正常,其他都不正常 geturl() 获取当前访问的网页的url 超时设 ...
分类:
编程语言 时间:
2019-08-19 19:31:12
阅读次数:
89
因为存为TXT可以实现,但是读取TXT里边的数据总是不尽如人意,所以,最终存为bin文件了。 先摘几个观点: http://www.openedv.com/posts/list/36712.htm “文本文件存储的都是ASCII内容,如果你以16进制格式显示出来,那就是ASCII的内码。” http ...
分类:
编程语言 时间:
2019-08-19 09:45:53
阅读次数:
158
如数据库a,表b。 1、如果表b采用MyISAM,data\a中会产生3个文件: b.frm :描述表结构文件,字段长度等 b.MYD(MYData):数据信息文件,存储数据信息(如果采用独立表存储模式) b.MYI(MYIndex):索引信息文件。 2、如果表b采用InnoDB,data\a中会产 ...
分类:
数据库 时间:
2019-08-18 22:00:33
阅读次数:
141