在计算机视觉中,目标检测是一个难题。在大型项目中,首先需要先进行目标检测,得到对应类别和坐标后,才进行之后的各种分析。如人脸识别,通常是首先人脸检测,得到人脸的目标框,再对此目标框进行人脸识别。如果该物体都不能检测得到,则后续的分析就无从入手。因此,目标检测占据着十分重要的地位。在目标检测算法中,通 ...
分类:
其他好文 时间:
2020-02-20 21:53:48
阅读次数:
116
在早期版本的Spark中,shuffle过程没有磁盘读写操作,是纯内存操作,后来发现效率较低,且极易引发OOME,较新版本的Shuffle操作都加入了磁盘读写进行了改进。 1、未经优化的HashShuffleManager:上一个stage中每一个task会对下一个stage的每一个task写一份数 ...
分类:
其他好文 时间:
2020-02-20 20:29:21
阅读次数:
62
概述 RDD只支持粗粒度转换,即在大量记录上执行的单个操作。将创建RDD的一系列Lineage(血统)记录下来,以便恢复丢失的分区。RDD的Lineage会记录RDD的元数据信息和转换行为,当该RDD的部分分区数据丢失时,它可以根据这些信息来重新运算和恢复丢失的数据分区。 示例代码如下: def m ...
分类:
其他好文 时间:
2020-02-20 17:05:54
阅读次数:
81
unit two 词汇 infant,toddler 阶段 difficult stage 可以换成 difficult period period 只指一段时间 区间的意思,stage则为发展历程的某一个阶段 childhood parenthood throw a tantrum 发脾气 愤怒从 ...
分类:
其他好文 时间:
2020-02-20 13:39:21
阅读次数:
121
最近新型冠状病毒肆虐,个人就想着在自学python的同时复习下Java,通过一些小项目的锻炼来提高自己的编码思想和编码能力。 经过多次搜寻和简单使用,推荐想学Java的新学者进入how2j.cn进行小项目的趣味实践,,点此进入 https://how2j.cn/stage/27.html 。趁这个假 ...
分类:
编程语言 时间:
2020-02-18 12:57:58
阅读次数:
77
我每天使用 Git ,但是很多命令记不住。
一般来说,日常使用只要记住下图6个命令,就可以了。但是熟练使用,恐怕要记住60~100个命令。
下面是我整理的常用 Git 命令清单。几个专用名词的译名如下。
Workspace:工作区
Index / Stage:暂存区
Repository:仓库区(或本地仓库)
Remote:远程仓库
受文章编译器限制,文章所有
分类:
其他好文 时间:
2020-02-17 10:43:13
阅读次数:
77
One Stage Inpainting with Bilateral Attention and Pyramid Filling Block 论文链接:https://arxiv.org/abs/1912.08642 源码地址:https://github.com/KumapowerLIU/One ...
分类:
其他好文 时间:
2020-02-07 13:06:52
阅读次数:
120
Problem: time series prediction The nonlinear autoregressive exogenous model: The Nonlinear autoregressive exogenous (NARX) model, which predicts the ...
分类:
Web程序 时间:
2020-02-05 23:44:53
阅读次数:
149
数据追溯: 数仓需要追溯,就是看以前的历史变化,比如一个月前的某一天的状态. 比如回溯2018-05-12--query ".....where updated_time>=2018-05-12 00:00:00" >stage.tmp_a#方法一,分区 每天保留一个快照.insert overwi ...
分类:
其他好文 时间:
2020-01-31 12:15:43
阅读次数:
404
官网介绍 什么是Spark 官网地址:http://spark.apache.org/ Apache Spark? 是用于大规模数据处理的统一分析引擎。 从右侧最后一条新闻看,Spark也用于AI人工智能。 spark是一个实现快速通用的集群计算平台。它是由加州大学伯克利分校AMP实验室 开发的通用 ...
分类:
其他好文 时间:
2020-01-26 19:08:26
阅读次数:
75