第二章.HDFS 1.大数据的两个核心技术 2.HDFS设计目标 3.HDFS自身的局限性 4.HDFS采用块设计以及采用块设计的好处 5.HDFS组成架构 6.元数据信息被持久化到磁盘分为哪两个文件 7.第二名称节点的作用 8.名称节点,数据节点的功能 待补充 9.副本机制、数据容错机制、心跳机制 ...
分类:
其他好文 时间:
2021-06-28 20:29:20
阅读次数:
0
性能测试流程 注意要点 测试机器硬件配置尽量和线上一致 系统版本与线上一致 测试环境部署线上最小单元模块(一般线上都是集群部署,线下可以用最小的单元集群) 应用、中间件、数据库要与线上一致 其他特殊配置 数据构造 ? 业务接口 ? -- 适合数据表关系复杂 ? -- 优点: 数据完整性比较好 ? 存 ...
分类:
其他好文 时间:
2021-06-18 19:57:35
阅读次数:
0
配置中心 例如: 携程的apollo , furion 配置中心, 是用来配置一些开关值,灰度值 等容易变化的配置项。一般场景是需要手动更新配置值, 也可以通过程序更新。 一般来讲配置中心的key 是需要在配置中心提前注册好的。 缓存 例如: redis, memcached 缓存一些热点数据, 防 ...
分类:
其他好文 时间:
2021-06-17 17:12:38
阅读次数:
0
数据链路层 信道,逻辑上的通信通道。 链路(Link),指一个节点到相邻节点的物理线路,中间无其他交换节点。 数据链路(Date Link),物理线路外还有其他必要实现的通行协议的软、硬件加到链路上,构成数据链路。 帧,数据链路层将网络层交下来的数据封装,在物理层变成数字信号在链路上传输。 数据链路 ...
分类:
其他好文 时间:
2021-06-13 10:43:59
阅读次数:
0
一、索引分裂 1. 什么是分裂 在开始介绍之前,我们先来搞清楚什么是索引分裂吧。“索引分裂”就是索引块的分裂,当一次DML事务操作修改了索引块上的数据,但是旧有的索引块没有足够的空间来容纳新修改的数据,那么将分裂出一个新索引块,旧有块的部分数据放到新开辟的索引块上去,这个过程就称为索引块的分裂(IN ...
分类:
其他好文 时间:
2021-06-02 20:50:56
阅读次数:
0
1. 创建索引 1.1 使用Alter创建索引 1 添加主键索引 特点:数据列不允许重复,不能为null,一张表只能有一个主键;Mysql主动将该字段进行排序 ALTER TABLE 表名 ADD Primary key (col); 添加唯一索引 特点:索引列是唯一的,可以null;Mysql主动 ...
分类:
数据库 时间:
2021-06-02 20:33:22
阅读次数:
0
JDBC(重点) 数据库驱动 驱动 : 声卡、显卡、数据库 JDBC SUN公司为了简化开发人员的(对数据库的统一)操作,提高了一个(java操作数据库的)规范,俗称 JDBC 这些规范的具体实现由具体的厂商去做。 对于开发人员来说,只需要掌握JDBC接口的操作即可 ? java.sql ? jav ...
分类:
数据库 时间:
2021-05-24 13:01:37
阅读次数:
0
nosql not only sql用户画像:热点数据:经常被使用的数据mysql## 安装- 可以使用yum 安装,要先配置epel源 ```shell yum install -y redis ```- 可以编译安装 ```SHELL wget http://download.redis.io/ ...
分类:
数据库 时间:
2021-05-24 04:10:10
阅读次数:
0
1,基本数据类型 定义 :4类8种: 数值型: 整数型Byte,short ,int ,long 浮点数类型:float,double 布尔类型:boolean 引用数据类型:string 获取取值范围 注意点 2,数据之间的转换 ctrl+1提示错误 分类 1.自动转换(隐式类型转换) 小-》大 ...
分类:
编程语言 时间:
2021-04-21 12:25:03
阅读次数:
0
九、DQL(重点) l 数据库在执行dql的时候,不会对数据进行改动,仅仅是看。只要把服务其中的数据获取返回给客户端 l 查询得到的结果也是一张表 9.1数据的准备 9.2基础查询 9.2.1查询所有列 ##(1.1)查询所有列 *表示所有列 ##eg:查询所有员工的信息 select * from ...
分类:
其他好文 时间:
2021-04-20 15:47:03
阅读次数:
0