ETS和DETS都提供"键-值"搜索表, 只不过ETS驻留在内存而DETS驻留在磁盘, 因此ETS高效但数据存储是临时的, DETS数据存储是持久的且节省内存但比较低效。 15.1 表的基本操作 创建和打开表 ets:new或dets:open_file 插入表 insert(TableName, ...
分类：
其他好文 时间：
2020-08-24 16:58:51
阅读次数：
73
Squid是Linux系统中最为流行的一款高性能代理服务软件，通常用作Web网站的前置缓存服务，能够代替用户向网站服务器请求页面数据并进行缓存。简单来说，Squid服务程序会按照收到的用户请求向网站源服务器请求页面、图片等所需的数据，并将服务器返回的数据存储在运行Squid服务程序的服务器上。当有用户再请求相同的数据时，则可以直接将存储服务器本地的数据交付给用户，这样不仅减少了用户的等待时间，还缓解了网站服务器的负载压力。
分类：
Web程序 时间：
2020-08-24 16:45:46
阅读次数：
53
一、大型互联网系统特点 高并发和大流量 如天猫双11，一分钟内有超过一千万的独立用户访问整个天猫系统，大规模并发用户访问对系统处理能力造成巨大冲击，系统需要有足够强的处理能力 高可用 大型互联网系统必须要7X24小时不间断提供服务，为此要对系统做特别的架构设计 海量数据存储 因为互联网需要满足大量的 ...
分类：
其他好文 时间：
2020-08-21 16:40:18
阅读次数：
136
1.数据库概述1.什么是数据库？数据库就是【存储数据的仓库】，其本质是一个【文件系统】，数据按照特定的格式将数据存储起来，用户可以通过SQL对数据库中的数据进行增加，修改，删除及查询操作。2.什么是关系型数据库？数据库中的【记录是有行有列的数据库】就是关系型数据库（RDBMS,RelationalDatabaseManagementSystem），与之相反的就是NoSQL数据库了。3.数据库和表数
分类：
数据库 时间：
2020-08-19 19:26:44
阅读次数：
74
Nacos 支持三种部署模式： 单机模式 - 用于测试和单机试用 集群模式 - 用于生产环境，确保高可用 多集群模式 - 用于多数据中心场景 默认Nacos使用嵌入式数据库实现数据的存储。所以，如果启动多个默认配置下的Nacos节点，数据存储时存在一致性问题的。。 为了解决这个问题，Nacos采用了 ...
分类：
其他好文 时间：
2020-08-19 19:14:41
阅读次数：
57
ImagesPipeline ImagesPipeline：专门用作于二进制数据下载和持久化存储的管道类。建议在爬虫文件中进行数据解析，不建议在爬虫文件中直接进行数据存储。 图片懒加载：应用到标签的伪属性，数据捕获的时候一定是基于伪属性进行。 # -*- coding: utf-8 -*-impor ...
分类：
其他好文 时间：
2020-08-15 23:57:48
阅读次数：
109
本文源码：GitHub·点这里||GitEE·点这里一、Cassandra简介1、基础描述Cassandra是一套开源分布式NoSQL数据库系统。它最初由Facebook开发，用于储存收件箱等简单格式数据，此后，由于Cassandra良好的可扩展性，逐渐发展成为了一种流行的分布式结构化数据存储方案。2、特点分析弹性可扩展性Cassandra是高度可扩展的;它允许添加更多的硬件以适应更多的客户和更多
分类：
数据库 时间：
2020-08-13 11:56:51
阅读次数：
74
表主要的就是主键，主键相关列， 主键的主要类型就是int 类型和 GUID 类型，各有各的特点，guid 类型肯定是唯一的，速度的话比int 类型要慢不少 关于数据库的冗余 还是要见一个满足三大范式四大特性的表，各有各的好处把，因为表少和表多的感觉是不一样的，当你查询的时候，操作一个表和操作多个表的 ...
分类：
其他好文 时间：
2020-08-13 11:48:19
阅读次数：
69
全球性革命数据存储，HDFS即将上线在这个互联网时代，随着数据量越来越多，在一个操作系统管辖的范围存不下了，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，因此迫切需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统。分布式管理系统的最大的变化就是管理对象不再是单机本地分布的，而是分布于网络中。分布式系统同样要为用户提供对文件和目录的相关操作。那么分布式存储类型有哪些呢？HD
分类：
其他好文 时间：
2020-08-12 15:37:17
阅读次数：
61
今日内容:1) hive的自定义函数 (简单会实现即可)2) hive优化部分: 能够理解, 知道有这些优化方案 , 记录 2.1: hive的数据压缩 2.2: hive的数据存储格式 2.3: fetch抓取 2.4: 本地模式 2.5: join的优化 2.6: SQL优化的方案 2.7: 动 ...
分类：
其他好文 时间：
2020-08-10 09:24:13
阅读次数：
57
