RAID卡是否有(启用)缓存对“随机读写”性能有巨大的影响。中高端的RAID卡都有缓存(价格也高)。 那么RAID卡的缓存与磁盘自带的缓存是如何设置的? 戴尔服务器的perc H710 RAID卡有512M缓存,并带电池。 建立阵列的时候(raid5),关于RAID卡缓存的默认选项是: 读取策略:自 ...
分类:
其他好文 时间:
2020-10-22 22:36:20
阅读次数:
31
在分布式系统中,有一个基本原则叫做CAP,consistence,一致性,availability,可用性,partition tolerance分区容错性。 一致性,在这里指的是分布式系统的各个副本的值要保持同步,这里强的是空间上的一致,注意和数据库中ACID中的一致性相区分,那个一致性指的是事务 ...
分类:
其他好文 时间:
2020-10-22 22:13:50
阅读次数:
23
今天买的一台服务器发现其硬盘容量与购买界面的描述不符,于是我去问了客服才知道有一块硬盘需要自己挂载,所以记录自己硬盘分区以及挂载操作得此文。 测试环境 ? 由于时间限制,本人仅在centos 8下测试通过,理论上适用于几乎所有的linux发行版。 硬盘分区 ? 输入df -h查看当前系统的硬盘容量使 ...
分类:
系统相关 时间:
2020-10-21 21:22:07
阅读次数:
34
无论对Spark集群,还是Hadoop集群等大数据相关的集群进行调优,对linux系统层面的调优都是必不可少的,这里主要介绍3种常用的调优和linux常见面试题 ...
分类:
系统相关 时间:
2020-10-20 16:23:11
阅读次数:
36
在Linux系统中存在硬链接和软连接两种文件。硬链接(hardlink):可以将它理解为一个“指向原始文件inode的指针”,系统不为它分配独立的inode和文件。所以,硬链接文件与原始文件其实是同一个文件,只是名字不同。我们每添加一个硬链接,该文件的inode连接数就会增加1;而且只有当该文件的inode连接数为0时,才算彻底将它删除。换言之,由于硬链接实际上是指向原文件inode的指针,因此即
分类:
其他好文 时间:
2020-10-19 22:23:48
阅读次数:
19
1.磁盘分区:裁剪分区fdisk---格式化mkfs创建文件系统(mkswap)---挂载mountfdisk/dev/sdb+2G设置大小(n创建新的分区,l列举分区类型,p打印出分区,t修改分区类型,d删除,w保持退出,q单纯退出)vim/etc/fstabpartprobe同步分区表du-sh/*根目录下所以目录占用空间大小添加交换分区fdisk/dev/sdbn创建一个扩展分区,再创建一个
分类:
其他好文 时间:
2020-10-19 22:20:30
阅读次数:
22
hive 建表语法 内部表: create table fzname (id int,name string,age int,tel string) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS TEXTFILE; 1 2 3 4 5 ...
分类:
其他好文 时间:
2020-10-18 16:40:39
阅读次数:
25
CAP 分布式系统中,这三个特性只能满足其中两个。 一致性(Consistency):分布式中一致性又分强一致性和弱一致性,强一致性主浊任何时刻任何节点看到的数据都是一样的,弱一致性一* * 般实现的是最终一致性。 可用性(Availability):集群在任何时间内都正常使用 分区容错性(Part ...
分类:
其他好文 时间:
2020-10-18 16:34:03
阅读次数:
20
一、服务器故障环境描述内蒙古某公司一台XFS文件系统服务器出现故障。客户的服务器搭建了一组riad5磁盘阵列,使用MD1200磁盘柜+RAID卡的组合方式,服务器上层分配了一个容量约80T左右的LUN,划分了两个分区。其中sdc1分区大小为2T,通过LVM扩容的方式,将sdc1分区加入到了root_lv中,剩余的sdc2分区格式化为XFS文件系统使用。服务器上层采用Linux系统。客户在对服务器进
分类:
其他好文 时间:
2020-10-18 09:21:11
阅读次数:
23
1. 创建用于交换分区的文件 如在/swapfile下创建一个8g大小的swap_8g文件 sudo dd if=/dev/zero of=/swapfile/swap_8g bs=1G count=8 2. 设置为交换分区文件: sudo mkswap /swapfile/swap_8g 3.更改 ...
分类:
系统相关 时间:
2020-10-16 10:58:19
阅读次数:
41