转自:https://blog.csdn.net/pmdream/article/details/113601956 一. 各种名词解释 1.1 ODS是什么? ODS层最好理解,基本上就是数据从源表拉过来,进行etl,比如mysql 映射到hive,那么到了hive里面就是ods层。 ODS 全称 ...
分类:
其他好文 时间:
2021-06-10 17:32:45
阅读次数:
0
1. Hadoop 概览Google 三篇论文(GFS -> HDFS,Map-Reduce -> MR,BigTable -> HBase)是 Hadoop 的思想之源。Hadoop 生态非常庞大,其最初两大核心是 HDFS 和 MR,分别负责存储和计算(Hadoop 1.x 中,MR 既负责计算 ...
JDBC:(JavaDatabase Connectivity:java数据库连接): 什么是JDBC? SUN公司为了简化开发人员(对数据库统一)的操作,提供了一个java操作数据库的规范,这就是JDBC。 或者说,JDBC是一款实现不同数据语言驱动的接口。 JDBC的操作步骤: 注册驱动--→2 ...
分类:
数据库 时间:
2021-06-08 22:24:30
阅读次数:
0
运行环境 centos 5.6 hadoop hivesqoop是让hadoop技术支持的clouder公司开发的一个在关系数据库和hdfs,hive之间数据导入导出的一个工具 在使用过程中可能遇到的问题: sqoop依赖zookeeper,所以必须配置ZOOKEEPER_HOME到环境变量中。sq ...
分类:
数据库 时间:
2021-06-07 20:36:05
阅读次数:
0
问题: Jemeter 使用 jdbc 连接 Mysql 8.0.17, 出现 Cannot create PoolableConnectionFactory (Could not crCannot create PoolableConnectionFactory (Could not create ...
分类:
数据库 时间:
2021-06-07 20:29:47
阅读次数:
0
1. 安装启动检查Mysql服务。##netstat -tunlp (3306) cd /usr/local/hive/lib ls mysql* cp mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars/ cd /usr/local/ ...
分类:
数据库 时间:
2021-06-07 20:10:49
阅读次数:
0
mysql-jdbc Java通过jdbc连接远程数据库并执行最简单的sql查询获取数据。 更多jdbc介绍,请参考官方文档 准备 假设远端有一个数据库mydb和一张简单的表student: 创建Java工程: 接下来创建一个jdbc demo工程,这里使用idea,eclipse同理;然后从官网下 ...
分类:
数据库 时间:
2021-06-07 20:10:07
阅读次数:
0
SSH框架整合 步骤一、导入所需要的jar包Hibernate Struts2 Spring:基础包:4+2 测试 整合web项目 aop JDBC 步骤二、Spring整合Struts2 1、在web.xml里配置struts2 2、在struts.xml里配置struts2 '3、在web.xm ...
分类:
其他好文 时间:
2021-06-06 19:09:53
阅读次数:
0
1.安装启动检查Mysql服务。netstat -tunlp (3306) 2.spark 连接mysql驱动程序。–cp /usr/local/hive/lib/mysql-connector-java-5.1.40-bin.jar /usr/local/spark/jars 3.启动 Mysql ...
分类:
数据库 时间:
2021-06-06 19:08:48
阅读次数:
0
Java数据库连接,(Java Database Connectivity,简称JDBC)是Java语言中用来规范客户端程序如何来访问数据库的应用程序接口,提供了诸如查询和更新数据库中数据的方法。 第一个JDBC程序步骤 1.加载驱动 //如果使用的mysql驱动版本为5,那么使用加载驱动为com. ...
分类:
数据库 时间:
2021-06-06 18:45:19
阅读次数:
0