码迷,mamicode.com
首页 >  
搜索关键字:hdfs 读写    ( 21363个结果
海思uboot配置与烧写
一、通过Hitools烧写uboot 之前每次都是通过SD卡烧写镜像,直到一次不小心将不同配置的uboot烧写到板子上,导致系统挂死。 (因为两个uboot的里面配置的DDR参数不同,一个是LPDDR,一个是T-DDR,然后导致无法将SD卡上的镜像读写到emmc上) 如果待移植单板中已有 U-boo ...
分类:其他好文   时间:2020-09-15 21:20:34    阅读次数:70
HDFS DataNode 多目录
一、过程 1、修改配置文件 vim etc/hadoop/hdfs-site.xml <property> <name>dfs.datanode.data.dir</name> <value>file:///${hadoop.tmp.dir}/dfs/data1,file:///${hadoop.t ...
分类:其他好文   时间:2020-09-15 21:01:05    阅读次数:37
centos6启动故障修复
启动故障排错和修复示例1环境:centos6.10故障:删除/sbin/init,删除系统第一个启动进程,导致无法启动思路:首先要明白init是由软件包安装的,其次此软件包存在于光盘中,可以将软件包中此文件导出方法如下:a)开机进入grub菜单,更改内核启动加载一个进程为init=/bin/bashb)进入bash后,由于是只读文件系统需要重新以读写方式挂载,否则后续拷贝文件会出错:mount-o
分类:其他好文   时间:2020-09-14 18:51:38    阅读次数:50
数据分析,这样才算读懂数据
经常有同学抱怨,在公司里,总被催着问:通过数据,你看到了什么?可实际数据就几个曲线而已,也不知道咋解读。也没有人教,自己好不容易写了几句,又被嫌弃:“你这都是废话,我们要深层次含义”。咋办?今天系统解答一下。就举个最简单的例子,下边是某公司一周销量数据,你看到了什么?错误的数据解读示例1、高了表扬低了骂。数据解读,写的是:周一到周五很高,周六、周日低,所以要!搞!高!……这么解读当然会被说:你这都
分类:其他好文   时间:2020-09-14 18:42:55    阅读次数:35
大数据计算的基石——MapReduce
#MapReduce Google File System提供了大数据存储的方案,这也为后来HDFS提供了理论依据,但是在大数据存储之上的大数据计算则不得不提到MapReduce。 虽然现在通过框架的不断发展,MapReduce已经渐渐的淡出人们的视野,越来越多的框架提供了简单的SQL语法来进行大数 ...
分类:其他好文   时间:2020-09-12 21:52:03    阅读次数:61
8.30做JS的题目
1.以下代码执行后,console 的输出是? let x = 10;let foo = () => {console.log(x);let x = 20;x++;}foo(); 抛出 ReferenceError 2. var myObject = { foo: "bar", func: func ...
分类:Web程序   时间:2020-09-10 23:08:50    阅读次数:60
Hadoop HDFS shell
一、格式 1、父类 bin/hadoop fs 命令 2、子类 bin/hdfs dfs 命令 二、命令 1、help 作用:获取帮助文档格式:hadoop fs -help 命令名称 2、ls 作用:查看HDFS路径的文件 格式: hadoop fs -ls 路径 hadoop fs -ls -R ...
分类:系统相关   时间:2020-09-10 23:08:31    阅读次数:47
Redis_主从复制
Redis_主从复制 一主二仆 薪火相传 反客为主 哨兵模式sentinel ...
分类:其他好文   时间:2020-09-10 22:31:06    阅读次数:40
redis常用指令
Redis 1.定义 Redis是一个高性能的key-vaule数据库,key是字符串类型 2.特点 单进程?Redis的服务器程序采用的是单进程模式来处理客户端的请求。对读写时间的响应是通过对epoll函数的包装来做到的。 3.数据类型 键的类型时字符串 值的类型分为五种:字符串string,哈希 ...
分类:其他好文   时间:2020-09-10 22:30:39    阅读次数:31
hive的调优经验
1.hive本身对union这样的命令进行了优化 2.hdfs数据本地化率对hive性能产生影响 在数据大小一定的情况下,500个128M的文件和2个30G的文件 跑hive任务,性能是有差异的,两者最大的区别在于,后者在读取文件时,需要跨网络传输,而前者为本地读写。数据本地化率问题。 3.不同数据 ...
分类:其他好文   时间:2020-09-09 19:07:41    阅读次数:34
21363条   上一页 1 ... 41 42 43 44 45 ... 2137 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!