RDD通过persist方法或cache方法可以将前面的计算结果缓存,默认情况下 persist() 会把数据以序列化的形式缓存在 JVM 的堆空间中。 但是并不是这两个方法被调用时立即缓存,而是触发后面的action时,该RDD的计算结果将会被缓存在计算节点的内存中,并供后面重用。 示例如下: d ...
分类:
其他好文 时间:
2020-02-20 18:41:28
阅读次数:
74
存储引擎 使用的存储引擎 myisam / innodb/ memory myisam 存储: 如果表对事务要求不高,同时是以查询和添加为主的,我们考虑使用myisam存储引擎. ,比如 bbs 中的 发帖表,回复表. INNODB 存储: 对事务要求高,保存的数据都是重要数据,我们建议使用INNO ...
分类:
数据库 时间:
2020-02-20 16:47:14
阅读次数:
93
可见性:可见性指的是一个线程对主内存的修改可以被其他线程及时地察觉到。 导致共享变量在线程间不可见的原因: 1、线程交叉执行 2、指令重排序结合线程交叉执行 3、共享变量的值没有及时更新到主存中 Java内存模型:Java内存模型(Java Memory Model ,JMM)就是一种符合内存模型规 ...
分类:
编程语言 时间:
2020-02-20 11:41:36
阅读次数:
79
前几天看到一个帖子,讨论两个记录复制,贴主提出了一个解决方案,但是不想用,希望大家集思广益,让人没想到的是方法还真的挺多,这里罗列一下。这是需要复制的的两种记录TypeA = record value1 : word; value2 : word; value3 : word; end;TypeB ... ...
分类:
其他好文 时间:
2020-02-20 10:05:37
阅读次数:
53
非常可乐 Time Limit: 2000/1000 MS (Java/Others) Memory Limit: 32768/32768 K (Java/Others)Total Submission(s): 35881 Accepted Submission(s): 13963 Problem ...
分类:
其他好文 时间:
2020-02-19 11:40:58
阅读次数:
68
注意此篇文章接上篇:K8s之Pod资源管理及创建Harbor私有镜像仓库https://blog.51cto.com/14464303/2471369一、资源限制:pod和container的资源请求和限制:spec.containers[].resources.limits.cpu#cpu上限spec.containers[].resources.limits.memory#内存上限spec.c
分类:
其他好文 时间:
2020-02-18 23:18:41
阅读次数:
100
<?xml version="1.0" encoding="UTF-8"?> <!--自定义hazelcast配置文件 --> <hazelcast xsi:schemaLocation="http://www.hazelcast.com/schema/config hazelcast-config ...
分类:
其他好文 时间:
2020-02-18 10:01:25
阅读次数:
83
1、内核分配策略:参数overcommit_memory echo "1" > /proc/sys/vm/overcommit_memory vm.overcommit_memory 含义 0 表示内核将检查是否有足够的可用内存。如果有足够的可用内存,内存申请通过,否则内存申请失败,并把错误返回给应 ...
分类:
其他好文 时间:
2020-02-17 17:59:01
阅读次数:
100
1、收集内存使用率node_memory_MemTotal_bytes主机上的总内存node_memory_MemFree_bytes主机上的空闲内存node_memory_Buffers_bytes缓冲区缓存上的内存node_memory_Cached_bytes页面缓存中的内存计算使用内存的百分比(总内存-(空闲内存-缓冲区+缓存))/总内存*100round((node_memory_Mem
分类:
其他好文 时间:
2020-02-17 09:24:30
阅读次数:
195
消息持久化 消息持久化是保证消息不丢失的重要方式。 ActiveMQ提供了以下三种的消息存储方式: 1. Memory消息存储-基于内存的消息存储。 2. 基于日志消息存储方式,KahaDB是ActiveMQ的默认日志存储方式,它提供了容量的提升和恢复能力。 3. 基于JDBC的消息存储方式-数据存 ...
分类:
其他好文 时间:
2020-02-15 15:08:30
阅读次数:
67