Apex混合精度加速介绍:为了帮助提高Pytorch的训练效率,英伟达提供了混合精度训练工具Apex。号称能够在不降低性能的情况下,将模型训练的速度提升2-4倍,训练显存消耗减少为之前的一半。 该项目开源于:https://github.com/NVIDIA/apex ,文档地址是:https:// ...
分类:
其他好文 时间:
2020-12-05 11:01:50
阅读次数:
8
Java一次读取文本文件所有内容我们做文本处理的时候的最常用的就是读写文件了,尤其是读取文件,不论是什么文件,我都倾向于一次性将文本的原始内容直接读取到内存中再做处理,当然,这需要你有一台大内存的机器,内存不够者……可以一次读取少部分内容,分多次读取。读取文件效率最快的方法就是一次全读进来,很多人用readline()之类的方法,可能需要反复访问文件,而且每次readline()都会调用编码转换,
分类:
编程语言 时间:
2020-12-05 10:42:51
阅读次数:
6
下面为一种方法查找memory leak,但在实际使用过程中由于打印太多会导致效率很低,不是很实用,而且有些地方报错 如 *(malloc+191) 原文地址https://www.ibm.com/support/pages/linux-gdb-identify-memory-leaks Abstr ...
分类:
数据库 时间:
2020-12-04 11:46:37
阅读次数:
17
索引的的创建跟存储的引擎是挂钩的,存储引擎表示不同数据在不同磁盘的不同组织形式。 聚簇索引与非聚簇索引:取决于数据与索引是否是放在一起的。 例如InnoDb就是只能有一个聚簇索引但可以有很多非聚簇索引(向InnoDb插入数据的时候必须要包含一个索引的key值,而且你创建表的时候如果不设置索引,索引的 ...
分类:
数据库 时间:
2020-12-04 11:22:20
阅读次数:
28
一、理论 并查集的定义: 并查集是一种树型的数据结构,用于处理一些不交集的合并和查询问题。一般用数组实现。 Find:确定元素属于哪一个子集,它可以被用来确定两个元素是否属于同一个子集。 Union:将两个子集合并成同一个集合。 并查集的优化: 优化1: 降低rank,提高查询效率。合并时要考虑ra ...
分类:
其他好文 时间:
2020-12-04 11:19:39
阅读次数:
6
在跟踪源代码的时候,要追着源代码打断点,不然不知道每一步执行到那里。 有时候有的方法被多个地方调用,这时无法确认走哪个方法,改怎么办呢? 可以提前通过打调用栈的方式把整个流程弄通,然后在关键点打断点,这样效率更高。2.打印方法的调用链(堆栈)两种方式:2.1正常方式示例:@OverridepublicSimWeightcomputeWeight(floatboost,CollectionStati
分类:
其他好文 时间:
2020-12-04 11:13:28
阅读次数:
6
pringboot多数据源配置(mysql,redis,mongodb)实战用SpringBootStarter提升效率虽然不同的starter实现起来各有差异,但是他们基本上都会使用到两个相同的内容:ConfigurationProperties和AutoConfiguration。因为SpringBoot坚信“约定大于配置”这一理念,所以我们使用ConfigurationProperties来
分类:
数据库 时间:
2020-12-04 11:11:32
阅读次数:
9
函数 #什么函数 函数就是有某个具体功能的工具 函数必须先定义,后面才能调用,并且在任意位置调用 #为什么要用函数 减少某一特定功能的代码冗余 使函数的调用更加方便,提高开发效率 提高程序的扩展性 #定义函数 #使用关键字 def #函数名与变量名类似,命名规则相同 #该过程不会执行代码,只会检测语 ...
分类:
编程语言 时间:
2020-12-04 11:04:42
阅读次数:
3
在企业的应用场景中,为了知道优化SQL语句的执行,需要查看SQL语句的具体执行过程,以加快SQL语句的执行效率。 ...
分类:
数据库 时间:
2020-12-04 11:00:54
阅读次数:
7
一、 优先队列的概述 在前面的数据结构(三):线性表-栈,队列中记录到,队列是先进先出的结构,元素在队列末端添加,在队列前头删除,若使用该队列的数据结构,则当要找出队列中的最大最小值时,需要遍历队列 对每个元素做比较后得出,这样在实际的生产应用中效率是很低的,这时就需要有一种队列,能快捷的获取队列中 ...
分类:
其他好文 时间:
2020-12-03 12:22:31
阅读次数:
5