在使用MPI框架中,需要多机进行通信进行并行计算;现在配置多个主机进行运行mpi程序,并进行通信;涉及到ssh无密码和nfs文件系统配置; 参考文档: https://mpitutorial.com/tutorials/running-an-mpi-cluster-within-a-lan/ 配置如 ...
分类:
其他好文 时间:
2020-06-02 19:04:48
阅读次数:
154
1、什么是DRBD?DRBD是由内核模块和相关脚本而构成,用以构建高可用性的集群。其实现方式是通过网络来镜像整个设备。它允许用户在远程机器上建立一个本地块设备的实时镜像。一般与心跳连接结合使用,也可以把它看作是一种网络RAID。2、DRBD是如何工作的?Drbd负责接收数据,把数据写到本地磁盘,然后发送给另一个主机。另一个主机再将数据存到自己的磁盘中。并以完全相同的形式记录在一个文件系统中(实际上
分类:
其他好文 时间:
2020-06-02 17:22:37
阅读次数:
65
Win20H1支持使用wsl2 (真实Linux内核) docker for win也因此支持了wsl2 ,使用因此得到体验明显提升;另一方面,子系统在wsl缺失的功能也得到弥补,相当于一台运行在win上的虚拟机,而文件系统是互通的;ubuntu和docker均运行在wsl2上面 ,介绍过程穿插介... ...
数据库索引 cnblogs csdn 目录 索引 mysql mongodb redis 索引 索引是数据库中对某一列或多个列的值进行预排序的数据结构,提高检索效率 存储单元: 磁盘最小存储单元是 扇区,512 字节 文件系统的最小存储单元是 块,4k InnoDB存储引擎的最小储存单元是 页,16 ...
分类:
数据库 时间:
2020-06-01 00:56:06
阅读次数:
77
微PE工具制作U盘启动教程 下载微PE工具,微PE工具箱 - 最好用的WinPE装机维护工具 打开PE工具,勾选使用协议,选择将PE安装到U盘 默认,立即安装进U盘 等待安装进度条走完 点击完成安装即可使用了 ...
分类:
其他好文 时间:
2020-05-31 19:56:40
阅读次数:
374
1. 实现文件系统要记住两个重要链表 a.文件系统链表。b.每一个文件系统的mount挂载点链表。 2. 注意vfs提供的三类接口 a.和POSIX系统调用有关的接口 即实现open/read/write的操作的接口。b.和底层介质有关的接口 即下接块设备层的接口。c.如何管理自身的接口,即何时以及 ...
分类:
其他好文 时间:
2020-05-31 19:54:08
阅读次数:
78
1.1、概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。 导入数据:MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统; 导出数据:从Hadoop的文件系统中导出数据到关系数据库mysql等 1.2、sqoop1与 ...
分类:
其他好文 时间:
2020-05-31 19:30:40
阅读次数:
69
Spark提供的主要抽象是resilient distributed dataset(RDD) 弹性分布式数据集,它是跨集群节点划分的元素的集合,可以并行操作。通过从Hadoop文件系统(或任何其他Hadoop支持的文件系统)中的文件或驱动程序中现有的Scala集合开始并进行转换来创建RDD。用户还 ...
分类:
编程语言 时间:
2020-05-31 16:03:22
阅读次数:
92
一、目录和路径 1. 目录 目录是一组相关文件的集合。一个目录下面除了可以存放文件之外还可以存放其他目录,即包含子目录。 在确定文件、目录位置时,DOS 和 Unix/Linux 都采用“路径名+文件名”的方式。路径反映的是目录与目录之间的关系。 2. 路径 Unix/Linux 路径由到达定位文件 ...
分类:
系统相关 时间:
2020-05-31 10:41:14
阅读次数:
141
一个合格的Linux运维工程师就必须知道系统启动流程,不管是在面试中还是系统故障排错或多或少都会涉及到启动流程。本文参考《鸟哥的Linux私房菜》第三版在了解系统启动流程之前先了解几个概念:Linux的组成部分:Kernel+rootfs(根文件系统)+程序Kernel的功能:进程管理、内存管理、网... ...
分类:
系统相关 时间:
2020-05-31 00:53:18
阅读次数:
117