今天MR的数据源很可能出现了问题,正常每天对方服务器会推过来2.1TB数据,今天只有1.6TB。 过来是gz压缩包,FTP的方式推送,进来之后我这边的程序进行解析,并存入HDFS。 对端的工程师只能看到压缩包目录的大小,看不到压缩前文件总大小,商量了一下,觉得不好对比数据一致性,想排查数据量问题,没 ...
分类:
其他好文 时间:
2020-07-17 09:40:37
阅读次数:
123
之前OGG配置文件中都会明文记录密码,而在OGG12c及以上版本中,有一个特性credentialstore,可以用来杜绝明文密码,提升安全性。 这里测试添加credentialstore并配置数据库用户ogg别名为user,至此可以使用dblogin useridalias user登陆ogg: ...
分类:
其他好文 时间:
2020-07-17 09:29:41
阅读次数:
63
三次登录 写一个函数完成三次登录,三次不成功则登录失败,失败返回False,登陆成功返回True 用户的用户名和密码存储在文件中,该文件包含多个用户名以及对应的密码, 形式为:name|password,每个人占用文件的一行 实现代码: def login(): flag = 0 # 用于三次循环 ...
分类:
其他好文 时间:
2020-07-16 22:01:56
阅读次数:
82
类内初始化 c++11中,可以为类内成员变量提供一个初始值,在创建对象的时候,初始值就可以用来初始化该成员变量。在头文件中可以赋初值。 const成员变量的初始化 两种方式: 在头文件定义时赋初值进行初始化 在构造函数的初始化列表中进行初始化,不可以通过赋值来初始化 //类定义(类声明) class ...
分类:
编程语言 时间:
2020-07-16 21:47:18
阅读次数:
67
1.功能概述 1.1要素缓冲区分析 基本概念 要素缓冲区分析是指在围绕选中的矢量要素一定距离处自动建立其周围一定宽度范围内的缓冲多边形实体,从而实现空间数据在水平方向得以扩展的信息分析方法。 缓冲的多边形覆盖了该几何图形的距离小于或者等于缓冲距离的所有点。 主要用途 缓冲区分析主要用于分析事物对周围... ...
分类:
其他好文 时间:
2020-07-16 21:24:54
阅读次数:
81
1.主题插件 经多个主题使用,最终使用Solarized Dark,还是有部分改动,在setting文件中自定义部分颜色, "[Solarized Dark]": { "functions": "#d8ca04dc", "types": "#08c48cfd", "comments": "#5ed1 ...
分类:
其他好文 时间:
2020-07-16 21:23:26
阅读次数:
56
一、rsync+inotify与rsync+sersync架构的区别 1、rsync+inotify a、inotify只能记录下被监听的目录发生了变化(增,删,改)并没有把具体是哪个文件或者哪个目录发生了变化记录下来; b、rsync在同步的时候,并不知道具体是哪个文件或目录发生了变化,每次都是对 ...
分类:
其他好文 时间:
2020-07-16 21:21:14
阅读次数:
65
方法区概述 栈堆方法区间的交互关系 方法区的基本理解 Hotspot 中方法区的演进 设置方法区大小的参数 OOM PermGen 和 OOM Metaspace 举例 方法区的内部结构 class 文件中常量池的理解 运行时常量池的理解 图示举例方法区的使用 方法区在 jdk6 、 jdk7 、 ...
分类:
其他好文 时间:
2020-07-16 21:19:58
阅读次数:
84
1.功能概述 栅格矢量化功能主要用于将分类栅格文件中的每个所选分类输出到单独的矢量层,或是将所有分类都输出到一个矢量层中。利用PIE-Basic的栅格转矢量功能将栅格数据转化为矢量数据。 2.基本概念 从栅格单元转换到几何图形的过程称为矢量化。 矢量化要求 拓扑转换,即保持栅格表示出的连通性与邻接性... ...
分类:
其他好文 时间:
2020-07-16 21:19:04
阅读次数:
75
第一步:修改路由模式: 第二步:再vue.config.js文件中配置打包后的目录名称,静态文件地址,静态文件目录名称,还可以去掉打包之后生成的map文件 第三步:开发环境和生产环境路径的配置 在根路径下面生成.env.development和.env.production文件,在文件中配置开发环境 ...
分类:
其他好文 时间:
2020-07-16 12:23:41
阅读次数:
102