HDFS 概述 HDFS的产生背景和定义 HDFS产生背景 解决海量数据的存储问题 需要一种系统来管理多台机器上的文件，这就是分布式文件管理系统。HDFS 只是分布式文件管理系统中的一种。 HDFS定义 HDFS（Hadoop Distributed File System），它是一个文件系统，用于 ...
分类：
其他好文 时间：
2021-06-30 17:40:30
阅读次数：
0
1.run maven->clean install 2.在Target目录下就可以找到jar 包 1.在系统var目录下创建btn文件夹 # cd /var # mkdir btn 2.编写文件start.sh并执行 # sh start.sh 3.安装完成后，确认有如下进程 # ps -ef | ...
分类：
编程语言 时间：
2021-06-29 16:12:57
阅读次数：
0
jar包启动指定端口：java -jar xxx.jar --server.port=9090 jar包启动时指定内存：java -jar -Xmx128m -Xms128m aa.jar 运行时指定配置文件：java -jar aa.jar --Dspring.config.location=ap ...
分类：
编程语言 时间：
2021-06-29 16:09:37
阅读次数：
0
1.会编程，参考实验 1.1编程实现词频统计基本操作 主函数 public static void main(String[] args) throws Exception{ Configuration conf = new Configuration(); //程序运行时参数 String[] o ...
分类：
其他好文 时间：
2021-06-29 16:02:29
阅读次数：
0
1、列出子目录或子文件 hdfs dfs -ls +路径 2、创建目录(-p表示父目录都会创建) hdfs dfs -mkdir -p /001/mydemo/x/y/z hdfs dfs -mkdir /001/mydemo3 /001/mydemo4 /001/mydemo5 3、列出文件夹中的 ...
分类：
其他好文 时间：
2021-06-28 21:04:34
阅读次数：
0
第二章.HDFS 1.大数据的两个核心技术 2.HDFS设计目标 3.HDFS自身的局限性 4.HDFS采用块设计以及采用块设计的好处 5.HDFS组成架构 6.元数据信息被持久化到磁盘分为哪两个文件 7.第二名称节点的作用 8.名称节点，数据节点的功能 待补充 9.副本机制、数据容错机制、心跳机制 ...
分类：
其他好文 时间：
2021-06-28 20:29:20
阅读次数：
0
1.查看IP地址，可以用ifconfig或者ifconfig | grep 192 2.查看端口netstat -tpln或者netstat -tunlp 3.8083是Tomcat端口，3306是MySQL数据库端口 4.Jmeter永久选择中文，在jmeter的bin目录中，打开jmeter.p ...
分类：
系统相关 时间：
2021-06-28 19:54:39
阅读次数：
0
1、在java链接oracle12时出现java.sql.SQLException: ORA-28040: 没有匹配的验证协议，如下图所示： 2、出现以上问题是由于连接数据库驱动和oracle版本不一致造成的，可以通过下载新的驱动解决，也可以使用修改配置的方式，在Oracle的安装路径下找到sqln ...
分类：
数据库 时间：
2021-06-28 19:42:56
阅读次数：
0
1. 基于Tomcat9的安装 or 解压 2.目录结构 启动和关闭服务 apache-tomcat-9.0.48\bin bin目录下的startup.bash以及shutdown.sh 3.配置 可能遇到的问题： Java环境变量没有配置 闪退问题：需要配置兼容性 乱码问题：配置文件中设置 可以 ...
分类：
其他好文 时间：
2021-06-28 19:16:36
阅读次数：
0
并发编程-ThreadLocal&ForkJoinPool（使用以及原理分析） 本章只要聊聊两个东西，这里会给出如何使用他们，并且分析各自的源码以及原理。 【ThreadLocal】：在指定线程中存储数据，数据存储后只有指定线程可以获得 【ForkJoinpool】：实际上他类似于【hadoop】他 ...
分类：
其他好文 时间：
2021-06-28 18:58:16
阅读次数：
0
