码迷,mamicode.com
首页 >  
搜索关键字:hadoop hdfs mapreduce yarn    ( 18270个结果
vue3.0使用ant-design-vue进行按需加载原来这么简单
下载 ui库 yarn add ant-design-vue 默认是全局引入,打包后体积很大, 非常影响首屏加载速度, 按需加载 下载按需加载的插件;推荐使用cnpm cnpm install babel-plugin-import --save-dev 下载在开发环境中 在项目的根目录下创建 ba ...
分类:其他好文   时间:2021-07-29 16:21:44    阅读次数:0
关于hive核心
一、DDL数据定义 1、创建数据库 1)创建一个数据库,数据库在 HDFS 上的默认存储路径是/user/hive/warehouse/*.db。 hive (default)> create database db_hive; 2)避免要创建的数据库已经存在错误,增加 if not exists ...
分类:其他好文   时间:2021-07-26 16:38:58    阅读次数:0
生产者分区写入策略
1、轮询策略:按照消息尽量保证每个分区的负载,消息会均匀分布到每个partition。写入消息的时候,key为null的时候,默认使用的是轮询策略。 2、随机策略:不使用。 3、按key写入策略:key.hash()%分区的数量。 4、自定义分区策略:类似于mapReduce指定分区。 乱序问题: ...
分类:其他好文   时间:2021-07-26 16:34:25    阅读次数:0
hadoop系列之一问题锦集
1、启动过程中出现Configuration has multiple addresses that match local node's address. Please configure the system with dfs.nameservice.id and dfs.ha.namenode ...
分类:其他好文   时间:2021-07-16 17:32:09    阅读次数:0
MapReduce报错Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio
在使用MapReduce的小测试的时候,Driver类启动,或报下面的错误 log4j:WARN No appenders could be found for logger (org.apache.hadoop.metrics2.lib.MutableMetricsFactory). log4j: ...
分类:编程语言   时间:2021-07-12 18:06:41    阅读次数:0
假期学习——大数据的初步认识
今天学习了大数据的一些基本的概念。 什么是Hadoop: 大数据主要还是解决海量数据的存储和海量数据的分析计算。 大数据的特点:大量、高效、多样(结构化数据和非结构化数据)、低价值密度。 Hadoop的三大发行版本: Apache、cloundera、hortonworks。 当然现在clounde ...
分类:其他好文   时间:2021-07-09 17:52:26    阅读次数:0
在vite2和Vue3中配置Mockjs
在 Vite2 与 Vue3 中使用`Mockjs`时有一些官方文档没有提到的注意点,特意做此记录。 ...
分类:Web程序   时间:2021-07-08 17:44:22    阅读次数:0
基于vuepress搭建博客
在NPM 中安装 npm install -g yarn 安装完成后,你可以测试下自己的版本 yarn --version 安装vuepress (全局安装) yarn global add vuepress # 或者:npm install -g vuepress yarn init初始化项目创建 ...
分类:其他好文   时间:2021-07-05 19:08:37    阅读次数:0
使用Java API之副本系数深度剖析
问题描述: (1)使用Java API创建HDFS文件并写入内容的副本系数为3 (2)使用命令上传至HDFS中的文件副本数为1:举例[hadoop@hadoop000 software]$ hadoop fs -put jdk-8u91-linux-x64.tar.gz / 问题回答: (1)使用J ...
分类:编程语言   时间:2021-07-05 16:38:12    阅读次数:0
Hadoop - 彻底解决警告:WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform
运行 HDFS 命令,总是出现恼人的 “WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable”... ...
分类:其他好文   时间:2021-07-02 16:04:09    阅读次数:0
18270条   1 2 3 4 ... 1827 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!