hive作为一个sql查询引擎，自带了一些基本的函数，比如count(计数)，sum(求和)，有时候这些基本函数满足不了我们的需求，这时候就要写hive hdf(user defined funation)，又叫用户自定义函数。 UDF 创建与使用步骤 继承org.apache.hadoop.hiv ...
分类：
其他好文 时间：
2020-12-25 13:07:42
阅读次数：
0
从 GitHub 克隆一个项目下发出现了错误： error: unable to create file spring-boot-project/spring-boot-tools/spring-boot-gradle-plugin/src/test/resources/org/springfram ...
一. 前期准备 1. Vmware workstation pro 16 官网下载 : https://www.vmware.com/ 密钥：ZF3R0-FHED2-M80TY-8QYGC-NPKYF （若失效请自行百度） 2. xshell,xftp 官网下载（需要注册） 3. 国内镜像网站下载c ...
参考图 简单说明 metrics以及log是组合监控的核心，log 的处理需要pg 实例配置相关的log 参数可以基于syslog 以及logstash 收集到 graylog，对于metrcis 的处理基于了telegraf（使用各类plugin，db，os。。。） 说明 pmm 也是一个不错的工 ...
分类：
其他好文 时间：
2020-12-25 11:47:16
阅读次数：
0
章节： 第一章节：CentOS 7 配置hadoop(一) 安装虚拟机（伪分布） 第二章节：CentOS 7 配置hadoop(二) 配置hdfs（伪分布） 第三章节：CentOS 7 配置hadoop(三) 配置hbase（伪分布） 第四章节：CentOS 7 配置hadoop(四) 配置hive ...
分类：
其他好文 时间：
2020-12-21 11:30:46
阅读次数：
0
一.在egg里面（此时egg已部署完毕）安装egg-jwt npm i egg-jwt -S 二.配置 在config.plugin.js文件里 并在config/config.default.js里面 三.使用（一般都是在前端登录并且用户存在时，后端会生成一个token返给前端） 在service ...
分类：
其他好文 时间：
2020-12-21 11:18:48
阅读次数：
0
作者 | 田小单 首先介绍下在本文出现的几个比较重要的概念： 函数计算（Function Compute）: 函数计算是一个事件驱动的服务，通过函数计算，用户无需管理服务器等运行情况，只需编写代码并上传。函数计算准备计算资源，并以弹性伸缩的方式运行用户代码，而用户只需根据实际代码运行所消耗的资源进行 ...
分类：
编程语言 时间：
2020-12-19 13:38:37
阅读次数：
7
hadoop Shuffle Error: Exceeded MAX_FAILED_UNIQUE_FETCHES; bailing-out 程序里面需要打开多个文件，进行分析，系统一般默认数量是1024，（用ulimit -a可以看到）对于正常使用是够了，但是对于程序来讲，就太少了。修改办法：修改2 ...
分类：
其他好文 时间：
2020-12-19 13:37:26
阅读次数：
3
连接hdfs 根据hdfs的版本引用相关的hdfs依赖 <!-- https://mvnrepository.com/artifact/org.apache.hadoop/hadoop-client --> <dependency> <groupId>org.apache.hadoop</group ...
随着多云环境和DevOps普及，越来多的DevOps工程师要面临云上与云下资源的自动化管理问题。 作为全球领先的Artifact Managenment软件供应商，JFrog的Artifactory也被众多知名企业采用，成为当前最流行的devops工具之一。那么通过什么方法能够在我们的云环境中快速部署一套Artifactory呢？相信大家都会立刻想起另外一个知名的IaC工具terraform。 JFrog正式提供了terraform插件，可以让大家通过IaC的方式快速部署Artifactory。
分类：
其他好文 时间：
2020-12-17 12:22:57
阅读次数：
2
