InnoDB体系架构 后台线程的主要作用是负责刷新内存池中的数据，保证缓冲池中的内存缓存的是最近的数据。此外将已修改的数据文件刷新到磁盘文件，同时保证在数据库发生异常的情况下InnoDB能恢复到正常运行状态。 后台线程 1. Master Thread Master Thread是一个非常核心的后台 ...
分类：
数据库 时间：
2020-04-03 15:12:19
阅读次数：
83
hadoop中map和reduce都是进程（spark中是线程），map和reduce可以部署在同一个机器上也可以部署在不同机器上。 输入数据是hdfs的block，通过一个map函数把它转化为一个个键值对，并同时将这些键值对写入内存缓存区（100M），内存缓存区的数据每满80M就会将这80M数据写 ...
分类：
其他好文 时间：
2020-04-01 00:56:20
阅读次数：
58
.Net 性能优化--缓存，主要有内存缓存，分布式缓存，http缓存 分布式缓存 接着上篇的.Net 性能优化--缓存--内存缓存的讲，如有不清晰的地方请参考上篇文章.Net 性能优化--缓存--内存缓存 上上篇的.Net 性能优化--缓存--内存缓存说的是使用asp.net core 自带的扩展 ...
分类：
数据库 时间：
2020-03-20 14:28:40
阅读次数：
103
spring可以很好地管理各种内存的快速缓存。 这些常见的内存缓存库实现方式有redis,Ehcache。 本文阐述的是redis,毕竟这个东西相当容易使用。 spring通过 org.springframework.cache.Cache 和org.springframework.cache.Ca ...
分类：
编程语言 时间：
2020-03-11 00:48:30
阅读次数：
324
一、概述 在分析OkHttp3的缓存机制之前先手写一个实现了三级缓存的ImageLoader来整体感受一下LruCache和DiskLruCache的用法。本例实现了三级缓存，利用LruCache实现内存缓存，利用DiskLruCache实现磁盘缓存。整体的流程是：当用户请求一张图时，首先检查内存中 ...
分类：
系统相关 时间：
2020-03-02 13:04:51
阅读次数：
95
军规适用场景：并发量大、数据量大的互联网业务; 军规：介绍内容; 解读：讲解原因，解读比军规更重要 一、基础规范 1.必须使用InnoDB存储引擎, 解读：支持事务、行级锁、并发性能更好、CPU及内存缓存页优化使得资源利用率更高 2.必须使用UTF8字符集, 解读：万国码，无需转码，无乱码风险，节省 ...
分类：
其他好文 时间：
2020-02-18 09:59:49
阅读次数：
78
缓存的主要作用是暂时在内存中保存业务系统的数据处理结果，并且等待下次访问使用。对于那些频繁需要查询比对的热点数据，我们采用使用缓存。 GuavaCache是google出品的内存缓存工具。对于数据量较小的，几条，几十条数据，而且需要加缓存的接口较少，建议使用Google提供的guava Cache， ...
分类：
编程语言 时间：
2020-02-17 00:45:08
阅读次数：
117
Caffeine是一种高性能的缓存库，是基于Java 8的最佳（最优）缓存框架。 Cache（缓存），基于Google Guava，Caffeine提供一个内存缓存，大大改善了设计Guava's cache 和 ConcurrentLinkedHashMap 的体验。 1 LoadingCache< ...
分类：
其他好文 时间：
2020-02-06 10:36:55
阅读次数：
73
spark动态资源调整其实也就是说的executor数目支持动态增减，动态增减是根据spark应用的实际负载情况来决定。 开启动态资源调整需要（on yarn情况下） 1.将spark.dynamicAllocation.enabled设置为true。意思就是启动动态资源功能 2.将spark.sh ...
分类：
其他好文 时间：
2020-01-22 18:07:12
阅读次数：
159
