1。hadoop生态系统 2.Hadoop分布式文件系统 2.1 HDFS的设计 2.2 HDFS的概念 数据块 namenode和datanode HDFS的高可用性 2.3命令行接口 2.4hadoop文件系统 2.5通过Flume和sqoop导入数据 ...
分类:
其他好文 时间:
2020-04-09 15:30:24
阅读次数:
92
#TCL/*Transaction Control Language 事务控制语言 事务:一个或一组sql语句组成一个执行单元,这个执行单元要么全部执行,要么全部不执行。 案例:转账 张三丰 1000郭襄 1000 update 表 set 张三丰的余额=500 where name='张三丰'意外 ...
分类:
数据库 时间:
2020-04-07 20:47:08
阅读次数:
84
1、编写脚本,支持让用户自主选择,使用mysqldump还是xtraback全量备份。#!/bin/bashPS3="Pleaseinputachoice:"selectmenuinmysqldumpxtrabackup;docase$REPLYin1)mkdir/backup/dump/&>/dev/nullmysqldump-F-A--single-transaction--ma
分类:
其他好文 时间:
2020-04-07 20:15:13
阅读次数:
84
转:https://blog.csdn.net/u012248802/article/details/77866019 今天在清空mysql数据库中的表格数据时,报了如下错误,导致操作失败: 上网查找了一下,了解到了该类问题出现的主要原因是:Mysql的 InnoDB存储引擎是支持事务的,事务开启后 ...
分类:
数据库 时间:
2020-04-06 13:31:35
阅读次数:
82
创建3台虚拟机 主机为桌面版 其他为迷你版本 ******************************常用命令、进程名称****************************启动集群命令: start-all.sh启动zookeeper: zkServer.sh start 启动journal ...
分类:
Web程序 时间:
2020-04-05 00:40:06
阅读次数:
101
使用mysqldump导出数据的时候收到选项 set-gtid-purged=AUTO的影响和非GTID下导出不同。如果在GTID开启情况下使用如下语句导出数据: mysqldump --single-transaction --master-data=2 -R -E --triggers --al ...
分类:
数据库 时间:
2020-04-04 18:53:39
阅读次数:
243
学习了这么久hadoop,都没有搭过集群,是不合格的。这次搭建完,细扣具体的Job运行情况,日志信息,对Hadoop了解更深了。后面也要陆续搭建分布式flume,kafka,hbase,mysql来完成最终的离线批处理分析项目。 搭建步骤 1. 虚拟机环境准备(IP地址、主机名、新用户、防火墙、SS ...
分类:
其他好文 时间:
2020-04-04 15:00:32
阅读次数:
81
事务(Transaction)定义 一个最小的不可再分的工作单元;通常一个事务对应一个完整的业务(例如银行账户转账业务,该业务就是一个最小的工作单元) 一个完整的业务需要批量的DML(insert、update、delete)语句共同联合完成 事务只和DML语句有关,或者说DML语句才有事务。这个和 ...
分类:
数据库 时间:
2020-04-03 21:35:18
阅读次数:
88
数据库版本表t_version包含的字段: 用户创建config,在一个config下创建多个版本。 在创建版本时,versionId字段要在该config下上一个版本ID的基础上自动加1. 在创建版本时,使用@Transaction注解设置数据库事务。 获取当前config的最大版本号 此时存在的 ...
分类:
数据库 时间:
2020-04-03 21:34:27
阅读次数:
87
事务创建函数 int lr_start_transaction(const char * transaction_name) int lr_end_transaction(const char * transaction_name,int status) lr_start_sub_transacti ...
分类:
其他好文 时间:
2020-04-03 10:27:21
阅读次数:
82