码迷,mamicode.com
首页 >  
搜索关键字:hdfs 读写    ( 21363个结果
mysql读写分离, 这个骚操作, 应该给满分
1.mysql主从复制1、基础知识日志是把数据库的每一个变化都记载到一个专用的文件里,这种文件就叫做日志文件。mysql默认只开启错误日志,因为过多的日志将会影响系统的处理性能。在mysql5.0以前版本支持文本格式和二进制格式的日志,但是在mysql5.0后版本就只支持二进制格式的日志。因为二进制日志在性能、信息处理等方面有更多的优点。2、启用mysql二进制日志mysql二进制日志由配置文件m
分类:数据库   时间:2020-08-18 13:38:03    阅读次数:66
极简 Node.js 入门 - 3.1 File System API 风格
极简 Node.js 入门系列教程:https://www.yuque.com/sunluyong/node 本文更佳阅读体验:https://www.yuque.com/sunluyong/node/fs-api-style Node.js 对文件、文件夹读写操作主要靠内置的 fs 模块 cons ...
分类:Windows程序   时间:2020-08-17 16:46:56    阅读次数:79
flume安装与使用
1.flume简介 Flume是Cloudera提供的日志收集系统,Flume支持在日志系统中定制各类数据发送方,用于收集数据;同时,Flume提供对数据进行简单处理,并写到各种数据接受方(可定制)的能力。 Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。 2.安装和使用说明 ...
分类:Web程序   时间:2020-08-13 22:07:34    阅读次数:83
hdfs学习(一)
一、hdfs概述 介绍: 在现代的企业环境中,单机容量往往无法存储大量数据,需要跨机器存储。统一管理分布在集群上的文件系统称为分布式文件系统 。HDFS(Hadoop Distributed File System)是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数 ...
分类:其他好文   时间:2020-08-13 12:16:47    阅读次数:60
linux文件系统讲解(一)
首先拿个一个硬盘,不能直接使用,要进行分区,比如下面的一块内存: 如果要进行分区,那么怎么分区,所以要有一个内存,用来保存怎么分区的信息,该块内存的名字叫启动块(BootBlock),他的大小是固定的,为1KB. 如下图示例: 分区结束后,还不能够直接使用,还要进行格式化,再格式化之前,要对读写的最 ...
分类:系统相关   时间:2020-08-13 12:14:06    阅读次数:73
CDH开启kerberos后在第三方机器上部署Spark程序问题解决
一、概述 当CDH平台开启kerberos后,需要kdc服务验证通过和kerberos协议验证通过才可以。如果将spark程序部署在CDH 机器上,直接在生成keytab并使用principal登录kerberos即可。 如果当spark应用程序部署在第三方机器上时,还需要处理krb5.conf注册 ...
分类:其他好文   时间:2020-08-13 12:07:11    阅读次数:88
datax写hdfs
设置datax java 堆栈内存大小python datax.py --jvm="-Xms5G -Xmx5G" 编译插件mvn -U clean package assembly:assembly -Dmaven.test.skip=true ...
分类:其他好文   时间:2020-08-13 11:49:41    阅读次数:46
Python有哪些华而不实的技巧?
前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 作者:code123 PS:如有需要Python学习资料的小伙伴可以加下方的群去找免费管理员领取 可以免费领取源码、项目实战视频、PDF文件等 显示有限的接口到外部 当发布p ...
分类:编程语言   时间:2020-08-13 11:47:13    阅读次数:56
HDFS常用命令(持续增加,总结贴)
HDFS常用命令(持续增加,总结贴)
分类:其他好文   时间:2020-08-12 15:49:03    阅读次数:56
磁盘IO问题分析工具
计算机有三大件:CPU、内存、磁盘,这三者有一个“拖后腿”的,那就是磁盘。在生产环境,作为数据库角色的服务器磁盘建议拿至少4块硬盘做RAID10,这样既保证数据读写速度也保证数据的安全。如果使用普通的磁盘,即使CPU再强悍,最终的服务器性能也不会太好。本案例背景是这样的,一台机器,收到告警磁盘IO达到100%,但是登录机器后查看并没有什么异常,也就是说磁盘飙到100%只是短暂的一会儿。既然出现了1
分类:其他好文   时间:2020-08-12 15:39:54    阅读次数:60
21363条   上一页 1 ... 44 45 46 47 48 ... 2137 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!