码迷,mamicode.com
首页 >  
搜索关键字:hdfs 读写    ( 21363个结果
MySQL中间件proxysql实现MySQL读写分离
MySQL中间件proxysql实现MySQL读写分离
分类:数据库   时间:2020-07-27 10:00:46    阅读次数:120
Hadoop小练习
Hadoop和HDFS内容:1.什么是HDFS文件系统? HDFS是大数据开源框架hadoop的组件之一,全称(Hadoop Distributed File System),它是一个分布式文件系统,由多台服务器联合起来实现文件存储功能,通过目录树来定位文件,集群中的服务器都有有各自的角色. 2.h ...
分类:其他好文   时间:2020-07-26 23:17:20    阅读次数:88
HDFS
1.1.HDFS. 它是一个分布式文件管理系统,用来存储文件,通过目录树来定位文件;由多个服务器联合起来实现功能,集群中的服务器有各自的角色。 适用场景:适合一次写入,多次读出的场景,且不支持文件的修改。适合用来做数据的分析,并不适合用来做网盘应用。 1.1.1NameNode:就是master,它 ...
分类:其他好文   时间:2020-07-26 23:15:19    阅读次数:102
Hadoop HA高可用搭建流程
8.3 HDFS-HA集群配置 8.3.1 环境准备 1. 修改IP 2. 修改主机名及主机名和IP地址的映射 3. 关闭防火墙 4. ssh免密登录 5. 安装JDK,配置环境变量等 8.3.2 规划集群 表3-1 hadoop102 hadoop103 hadoop104 NameNode Na ...
分类:其他好文   时间:2020-07-26 23:10:23    阅读次数:85
SVN的使用
SVN优势 1.存储 SVN服务器既具有CVS所具有数据储存的优点,像是信息资源存储后会形成资源树结构,便于存储的同时,数据一般不会丢失,同时又拥有自己的特色。SVN是通过关系数据库及二进制的存储方式,同时解决了既往不能同时读写同一文件等问题,同时增添了自己特有的“零或一”原则。 2.速度 与人们初 ...
分类:其他好文   时间:2020-07-26 23:06:24    阅读次数:78
django 读写分离(数据库连接设置两个名字,一个读,一个写,读写数据库端口、库、用户不同,ip可以不同或相同)
主从分离:https://blog.csdn.net/weixin_39726347/article/details/88051089 1.在项目settings.py下的读写数据库配置如下: DATABASES = { 'default': { 'ENGINE': 'django.db.backe ...
分类:数据库   时间:2020-07-26 23:06:04    阅读次数:97
hadoop框架三大组件hdfs、mapreduce、yarn 内容
HDFS概述 HDFS产出背景及定义 HDFS优缺点 HDFS组成架构 HDFS文件块大小(面试重点) MapReduce概述 MapReduce定义 MapReduce优缺点 优点 缺点 MapReduce核心思想 1)分布式的运算程序往往需要分成至少2个阶段。 2)第一个阶段的MapTask并发 ...
分类:其他好文   时间:2020-07-26 23:01:30    阅读次数:83
hadoop框架hdfs、mapreduce、yarn三大组件内容
Hadoop是什么?1.hadoop是一个由Apache基金会所开发的分布式系统基础架构。2.主要解决,海量数据的储存和海量数据的分析计算问题。3.广义来说,hadoop通常是指一个更广泛的概念 Hadoop生态圈。 Hadoop三大发行版本Hadoop三大发行版本:Apache、Cloudera、 ...
分类:其他好文   时间:2020-07-26 22:58:58    阅读次数:69
hadoop-hdfs
4 大数据技术之Hadoop(HDFS) 第1章 HDFS概述 1.1 HDFS产出背景及定义 1.2 HDFS优缺点 1.3 HDFS组成架构 1.4 HDFS文件块大小(面试重点) 第2章 HDFS的Shell操作(开发重点) 1.基本语法 bin/hadoop fs 具体命令 OR bin/h ...
分类:其他好文   时间:2020-07-26 19:35:03    阅读次数:94
Python文件操作
在 Python 中要操作文件需要记住 1 个函数和 3 个方法 open 函数负责打开文件,并且返回 文件对象 read/write/close 三个方法都需要通过 文件对象 来调用 新建(打开)文件和关闭文件 在python,使用open函数,可以打开一个已经存在的文件,或者如果该文件不存在,则 ...
分类:编程语言   时间:2020-07-26 15:47:20    阅读次数:69
21363条   上一页 1 ... 49 50 51 52 53 ... 2137 下一页
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!