在处理并发读或写时，可以通过实现一个由两种类型组成的锁系统来解决问题。这两种锁通常被称为共享锁和排他锁，也叫读锁和写锁。 读锁是共享的，相互不阻塞，多个用户同一时刻可以读取同一个资源而不相互干扰。 写锁是排他的，一个写锁会阻塞其他的写锁和读锁，确保在给定时间内只有1个用户能执行写入并防止其他用户读取 ...
分类：
数据库 时间：
2021-07-05 17:21:02
阅读次数：
0
问题描述： （1）使用Java API创建HDFS文件并写入内容的副本系数为3 （2）使用命令上传至HDFS中的文件副本数为1：举例[hadoop@hadoop000 software]$ hadoop fs -put jdk-8u91-linux-x64.tar.gz / 问题回答： （1）使用J ...
分类：
编程语言 时间：
2021-07-05 16:38:12
阅读次数：
0
运行 HDFS 命令，总是出现恼人的 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable”... ...
分类：
其他好文 时间：
2021-07-02 16:04:09
阅读次数：
0
一、知识点 未完成 二、参数配置 transaction-isolation： Oracle 数据库的默认隔离级别其实就是“读提交”，从 Oracle 迁移到 MySQL 的应用，为保证数据库隔离级别的一致，你一定要记得将 MySQL 的隔离级别设置为“读提交” binlog_format参数 fo ...
分类：
数据库 时间：
2021-07-02 15:59:41
阅读次数：
0
主要讨论RR隔离级别，因为RC只是少了间隙锁。 一、innodb七种锁 共享/排他锁(Shared and Exclusive Locks) 共享锁(Shared Locks,S锁) 排他锁(Exclusive Locks,X锁) 可以一起读，读写/写写互斥。 意向锁(Intention Locks ...
分类：
数据库 时间：
2021-07-02 15:56:48
阅读次数：
0
HDFS 概述 HDFS的产生背景和定义 HDFS产生背景 解决海量数据的存储问题 需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统。HDFS 只是分布式文件管理系统中的一种。 HDFS定义 HDFS（Hadoop Distributed File System），它是一个文件系统，用于 ...
分类：
其他好文 时间：
2021-06-30 17:40:30
阅读次数：
0
1、列出子目录或子文件 hdfs dfs -ls +路径 2、创建目录(-p表示父目录都会创建) hdfs dfs -mkdir -p /001/mydemo/x/y/z hdfs dfs -mkdir /001/mydemo3 /001/mydemo4 /001/mydemo5 3、列出文件夹中的 ...
分类：
其他好文 时间：
2021-06-28 21:04:34
阅读次数：
0
第二章.HDFS 1.大数据的两个核心技术 2.HDFS设计目标 3.HDFS自身的局限性 4.HDFS采用块设计以及采用块设计的好处 5.HDFS组成架构 6.元数据信息被持久化到磁盘分为哪两个文件 7.第二名称节点的作用 8.名称节点，数据节点的功能 待补充 9.副本机制、数据容错机制、心跳机制 ...
分类：
其他好文 时间：
2021-06-28 20:29:20
阅读次数：
0
一 zk基本概念 集群角色 Leader：为客户端提供读写服务 Follower：提供读服务，所有写服务都需要转交给 Leader 角色，参与选举 Observer：提供读服务，不参与选举过程，一般是为了增强 zk 集群的读请求并发能力 会话（session） zk 客户端与服务端之间的连接 通过心 ...
分类：
其他好文 时间：
2021-06-28 19:47:34
阅读次数：
0
缓冲流 缓冲流的作用 作用：缓冲流的作用主要是提高文件的读写效率 提高速度的原因：内部提供了一个缓冲区 实现非文件的复制 注意： 资源关闭，先关外面再关里面 说明:关闭外层流的同时，内层流也会自动的进行关闭。关于内层流的关闭，我们可以省略 步骤： 创建文件 创建节点流 创建缓冲流 读取与写入 pac ...
分类：
编程语言 时间：
2021-06-28 19:37:31
阅读次数：
0
