学习过得技术 HDFS YARN MR HIVE HBASE SPARK SPARK(sparkCore、sparkSql、sparkStreaming) HDFS 数据库管理、 存磁盘 Ha模式(在zookeeper之上) 联邦机制(把大象装进冰箱) split切片 Hbase 列式数据库 半结构 ...
分类：
其他好文 时间：
2021-04-05 12:37:34
阅读次数：
0
1、hive-site.xml解读 hive的远程模式，mysql连接配置。 <property> <name>javax.jdo.option.ConnectionUserName</name> <value>root</value><!--mysql的user--> <description>U ...
分类：
其他好文 时间：
2021-04-05 11:57:53
阅读次数：
0
关注公众号：【小张Python】，为你准备了 50+ 本Python 精品电子书籍 与 50G + 优质视频学习资料，后台回复关键字：1024 即可获取；如果对博文内容有什么疑问，公众号后台添加作者【个人微信】，可与作者直接进行交流 Numpy 中导入数据方式有多种，其中函数之一为 genfromt ...
分类：
其他好文 时间：
2021-03-30 13:17:48
阅读次数：
0
# 下载 官网地址:https://downloads.mysql.com/archives/get/p/23/file/mysql-8.0.20-linux-glibc2.12-x86_64.tar.xz ################清理原有mysql环境################### ...
分类：
数据库 时间：
2021-03-30 13:06:10
阅读次数：
0
能够看到是正则初始化编译时出现了错误，也就是split方法使用的正则写法出现了错误，因此上网找到了比较详细的写法。 故在使用split进行列转行时应该四个\ ...
分类：
其他好文 时间：
2021-03-18 14:07:12
阅读次数：
0
SET GLOBAL local_infile=1；//1表示开启，0表示关闭 SHOW VARIABLES LIKE '%local%'; ...
分类：
数据库 时间：
2021-03-17 14:52:51
阅读次数：
0
为什么10.2里面没有pagelayout的代码了。。 原文：https://www.cnblogs.com/ayanmw/archive/2012/06/06/2538783.html ...
分类：
编程语言 时间：
2021-03-17 14:46:16
阅读次数：
0
大数据技术板块划分 数据采集 flume kafka logstash filebeat ... 数据存储 mysql redis hbase hdfs ... 虽然mysql不属于大数据范畴 但是我在这也列出来了，因为你在工作中离不开它 数据查询 hive impala elasticsearch ...
分类：
其他好文 时间：
2021-03-17 14:04:41
阅读次数：
0
1、为什么要引入Yarn和Spark。 (1)现有的hadoop生态系统中存在的问题 1）使用mapreduce进行批量离线分析； 2）使用hive进行历史数据的分析； 3）使用hbase进行实时数据的查询； 4）使用storm进行实时的流处理； (2)选用spark的原因 1） 应用于流式计算的S ...
分类：
其他好文 时间：
2021-03-16 13:32:12
阅读次数：
0
此文仅为记录一次apache-poi解析导入数据时所遇到的问题,并为出现这种问题的童鞋提供一个可能的解决思路。 运行环境记录： 1.jdk1.7(版本比较旧) 2.poi-3.0.2-FINALL 1.报错日志记录，先上截取的报错日志 java.lang.reflect.InvocationTarg ...
分类：
其他好文 时间：
2021-03-15 10:41:23
阅读次数：
0
