HOG特征描述算子 前言 概念介绍 HOG特征：方向梯度直方图（Histogram of Oriented Gradient，HOG）特征是一种进行物体检测时的特征描述子，它是一种用于表征图像局部梯度方向和梯度强度分布特性的描述符。 特征描述子：计算机不能直接识别图像，所以特征描述子实际上就是图像的 ...
分类：
其他好文 时间：
2020-07-05 15:47:35
阅读次数：
47
1、mysql的安装，目的是存放hive的元数据 2、下载hive包，并进行解压 3、配置文件hive-site.xml <configuration> <property> <name>javax.jdo.option.ConnectionURL</name> <value>jdbc:mysql: ...
分类：
其他好文 时间：
2020-07-05 01:05:03
阅读次数：
83
1、脚本化运行 大量的hive查询任务，如果用交互式shell来进行输入的话，显然效率及其低下，因此，生产中更多的是使用脚本化运行机制： 该机制的核心点是：hive可以用一次性命令的方式来执行给定的hql语句 hive -e "insert into table t_dest select * fr ...
分类：
其他好文 时间：
2020-07-05 00:34:10
阅读次数：
60
方式一： SavaAsTable 用法： df.write.mode(SaveMode.Overwrite).insertInto(table) 方式二： InsertInto 用法： df.write.mode(SaveMode.Overwrite).saveAsTable(table) 两种方式 ...
分类：
其他好文 时间：
2020-07-03 01:10:09
阅读次数：
152
大数据开发的最后一环，将数仓中ADS层的数据，导出到MySql，剩下就是Java工程师的事了。 1 在MySql中创建对应的ADS表，字段和类型与数仓中的表一致，略。 2 数据导出脚本。 ①--update-mode updateonly：只更新，无法插入新数据。 allowinsert：允许新增 ...
分类：
数据库 时间：
2020-07-02 23:16:56
阅读次数：
81
程序函数库可分为3种类型：静态函数库（static libraries）、共享函数库（shared libraries）、动态加载函数库（dynamically loaded libraries）： 静态函数库，是在程序执行前就加入到目标程序中去了； 共享函数库，则是在程序启动的时候加载到程序中，它 ...
分类：
系统相关 时间：
2020-07-02 16:10:56
阅读次数：
85
windows 10 下面安装tensorflow gpu版本和pycharm中使用 ...
今天学习了一下Hive的自定义函数，于是乎想练习一下在本地编写一个自定义的函数，然后打包上传到集群，再进行执行的过程。但是中间遇到了一些小挫折，就是当我打包的时候，除了导入正常所需要的org.apache.hive包之外，并没导入其他的包。但是开始打包以后，报错了，报错信息如下： Could not ...
分类：
编程语言 时间：
2020-07-01 11:03:18
阅读次数：
199
###自定义函数 Hive 自带了一些函数，比如：max/min等，但是数量有限，自己可以通过自定义UDF来方便的扩展。当Hive提供的内置函数无法满足你的业务处理需要时，此时就可以考虑使用用户自定义函数（UDF：user-defined function）。 用户自定义函数类别分为以下三种 UDF ...
分类：
其他好文 时间：
2020-06-30 20:22:42
阅读次数：
57
一、概述 Hive是什么？ Hive是一个数据仓库基础工具在Hadoop中用来处理结构化数据。它架构在Hadoop之上，总归为大数据，并使得查询和分析方便。 最初，Hive是由Facebook开发，后来由Apache软件基金会开发，并作为进一步将它作为名义下Apache Hive为一个开源项目。它用 ...
分类：
其他好文 时间：
2020-06-30 17:16:56
阅读次数：
54
