1.学习了这么多知识开始实战 部分代码:public View onCreateView(@NonNull LayoutInflater inflater, @Nullable ViewGroup container, @Nullable Bundle savedInstanceState) { / ...
分类:
其他好文 时间:
2021-06-21 21:06:22
阅读次数:
0
前面我们学习了聚合查询,本篇我们来看看在模型设计中如何应用引用模式来提高查询效率。本文简单介绍了MongoDB的模型设计中的内嵌模式和引用模式,探讨了引用模式的使用、何时使用 及 使用限制。 ...
分类:
数据库 时间:
2021-06-20 18:24:03
阅读次数:
0
需求分析 采集需求:某服务器的某特定目录下,会不断产生新的文件,每当有新文件出现,就需要把文件采集到HDFS中去 结构示意图: 根据需求,首先定义以下3大要素 数据源组件,即source ——监控文件目录 : spooldir spooldir特性: 1、监视一个目录,只要目录中出现新文件,就会采集 ...
分类:
Web程序 时间:
2021-06-20 17:55:46
阅读次数:
0
用python做一些关于数据处理的操作,于是就产生问题:python有什么“奇淫技巧”可以帮助我快速处理数据呢,今天来讲python实战技巧之去除列表中的空值元素 ...
分类:
编程语言 时间:
2021-06-20 17:42:57
阅读次数:
0
Servlet汇总 因为看公司代码,有个cookie+jwt.Token登录验证接口,于是回顾下servlet、cookie、session、前后端分离restful、jwt.token相关内容。虽然现在流行的是网关封装各个接口,但是基础还是比较重要,需要重新复习。 Servlet--基础理论、实战 ...
分类:
其他好文 时间:
2021-06-20 17:37:51
阅读次数:
0
上一篇文章我们简单的介绍《 linux中sqoop实现hive数据导入到mysql》,本文将简单介绍如何通过sqoop把hive数据导入到mysql。一. 前期准备 实践本文内容,默认您已经安装和部署了hadoop,mysql,hive,sqoop等环境。如相关安装和部署有问题,可以参考《 linu ...
分类:
数据库 时间:
2021-06-19 19:26:08
阅读次数:
0
Hive列转行: select school,concat_ws('|',collect_set(name)) as name from tmp_01 group by school; 注意:collect_set 有重复的会去重, collect_list 有重复的不去重 hive行转列: sel ...
分类:
其他好文 时间:
2021-06-19 19:05:46
阅读次数:
0
Java小游戏实战开发——贪吃蛇小游戏 1、Direction类。 Direction:用于存放上下左右四个键。 package com.games; /* *枚举:就是几个固定的常量 */ public enum Direction{ UP,DOWN,LEFT,RIGHT } 2、Snake类 S ...
分类:
编程语言 时间:
2021-06-18 20:09:10
阅读次数:
0
原文链接: https://data-flair.training/blogs/data-locality-in-hadoop-mapreduce/ 1、什么是数据本地化 数据本地化(Data locality)是指将计算移动到数据所在的节点,而不是移动数据移动到计算所在的节点。在Hadoop中,一 ...
分类:
其他好文 时间:
2021-06-18 19:09:26
阅读次数:
0
InputSplit是block和mapper之间的代理,也即是为mapper提供了一个数据视图。 我们以HDFS的block的大小为128MB举例,当一行日志为130MB(包括行分隔符),这一行数据会被分在两个block中,如果mapper直接读block的话,会读到一个被截断的行日志。这是为什么 ...
分类:
其他好文 时间:
2021-06-18 18:49:59
阅读次数:
0