由于之前已经搭建好了，今天是看视频回顾下，然后做下记录。 之前已经搭建好了Yarn集群，现在在Yarn集群上搭建spark。 1、安装spark 下载源码包：wget http://mirror.bit.edu.cn/apache/spark/spark-1.3.0/spark-1.3.0.tgz ...
分类：
其他好文 时间：
2021-01-01 12:18:40
阅读次数：
0
主机规划: 192.168.0.137 连接端口: 5672 web端口: 15672 rabbit1 磁盘存储 192.168.0.137 连接端口: 5673 web端口: 15673 rabbit2 磁盘存储 192.168.0.137 连接端口: 5674 web端口: 15674 rabb ...
分类：
其他好文 时间：
2020-12-30 11:19:58
阅读次数：
0
一、概念在Java中，文件的输入和输出是通过流（Stream）来实现的。一个流，必有源端和目的端，它们可以是计算机内存的某些区域，也可以是磁盘文件，甚至可以是Internet上的某个URL。对于流而言，我们不用关心数据是如何传输的，只需要向源端输入数据，从目的端获取数据即可。流按照处理数据的单位，可以分为字节流和字符流。字节流的处理单位是字节，通常用来处理二进制文件，例如音乐、图片文件等。而字符流
分类：
编程语言 时间：
2020-12-29 11:47:33
阅读次数：
0
flume的概述 Apache Flume是一个分布式，可靠且可用的系统，用于有效地从许多不同的source收集，聚合和移动大量日志数据到集中式数据存储。 Apache Flume的使用不仅限于日志数据聚合。由于数据source是可定制的，因此Flume可用于传输大量event 数据，包括但不限于网 ...
分类：
Web程序 时间：
2020-12-29 11:10:09
阅读次数：
0
一、iostat # iostat Linux 3.10.0-957.el7.x86_64 (localhost.localdomain) 2020年10月10日 _x86_64_ (3 CPU) avg-cpu: %user %nice %system %iowait %steal %idle 0 ...
分类：
移动开发 时间：
2020-12-29 10:58:43
阅读次数：
0
第一种：增加一块磁盘而另磁盘空间增大 1)、先进入kvm环境，创建一块硬盘：qemu-img create -f qcow2 /home/tianke/test.qcow2 40G 2)、再给增加的硬盘修改成qemu的权限（chown qemu:qemu *） 3）、关闭虚拟机（virsh shut ...
分类：
其他好文 时间：
2020-12-28 11:47:58
阅读次数：
0
centos7 在安装后，通常我们通过df -h 来查看磁盘空间的时候率。如下： [root@oracle01 ~]# df -h Filesystem Size Used Avail Use% Mounted on /dev/mapper/centos-root 46G 32G 14G 71% / ...
分类：
其他好文 时间：
2020-12-28 11:47:08
阅读次数：
0
dmraid -a no 查看RAID磁盘 mdadm --zero-superblock /dev/sdai 参考 https://blog.csdn.net/kronus/article/details/7313984 dd替代品 http://www.garloff.de/kurt/linux ...
分类：
其他好文 时间：
2020-12-28 11:23:04
阅读次数：
0
随着单块磁盘在数据安全、性能、容量上呈现出的局限，磁盘阵列（Redundant Arrays of Inexpensive/Independent Disks，RAID）出现了，RAID把多块独立的磁盘按不同的方式组合起来，形成一个磁盘组，以获得比单块磁盘更高的数据安全、性能、容量。 一. 常见的R ...
分类：
系统相关 时间：
2020-12-28 11:07:12
阅读次数：
0
我们开的的各式各样系统中，系统运行需要CPU、内存、I/O、磁盘等等资源。但除了硬资源外，还有最为重要的软资源：数据。 当人们访问操作我们的系统时，其实归根是对数据的查看与生产。那么对于同一份数据，如果多个用户同时对它查看、修改时会出现什么问题呢？这必然会带来竞争，而为了控制并发的读取、修改数据会对 ...
分类：
其他好文 时间：
2020-12-28 11:04:00
阅读次数：
0
