CUDA中不能在主机代码中对cudaMalloc()返回的指针进行解引用。 可以将cudaMalloc()分配的指针传递给在设备上执行的函数。 可以在设备代码中使用cudaMalloc()分配的指针进行内存读/写操作。 可以将cudaMalloc()分配的指针传递给在主机上执行的函数。 不能在主机代 ...
分类：
其他好文 时间：
2020-06-11 21:57:45
阅读次数：
57
在使用MPI框架中，需要多机进行通信进行并行计算；现在配置多个主机进行运行mpi程序，并进行通信；涉及到ssh无密码和nfs文件系统配置； 参考文档： https://mpitutorial.com/tutorials/running-an-mpi-cluster-within-a-lan/ 配置如 ...
分类：
其他好文 时间：
2020-06-02 19:04:48
阅读次数：
154
简单提高文本读取效率，使用BufferedReader是个不错的选择。速度最快的方法是MappedByteBuffer，但是，相比BufferedReader而言，效果不是非常明显。也就是说，后者虽然快，但也快的有限（不要抱有性能提升几倍的幻想）。 对于大文本的读取，性能瓶颈主要在IO，read占时 ...
分类：
编程语言 时间：
2020-06-02 09:21:09
阅读次数：
77
GPU是典型的单指令多数据（SIMD）的体系结构，善于大规模的并行计算；而CPU是多指令单数据（MISD）的体系结构，更擅长逻辑控制。 一：OPENCL OPENCL是一种异构计算的标准，支持A卡和N卡，还支持CPU计算。 二：CUDA CUDA是一种异构计算的标准，只支持N卡。在此基础上提供Phy ...
libtorch默认是将cpu性能全部耗光，cpu利用率达到95%，需要设置并行计算的线程数，设置函数是torch::set_num_threads(1); python版本的torch.set_num_threads(1) resnet50模型 cpu型号：I7 4770 3.6HZ 内存16G ...
分类：
编程语言 时间：
2020-05-20 12:09:22
阅读次数：
326
[TOC] 粒子群算法（PSO）和遗传算法(GA)都是优化算法，都力图在自然特性的基础上模拟个体种群的适应性，它们都采用一定的变换规则通过搜索空间求解。 PSO和GA的相同点 1. 都属于仿生算法。PSO主要模拟鸟类觅食、人类认知等社会行为而提出；GA主要借用生物进化中“适者生存”的规律。 2. 都 ...
分类：
编程语言 时间：
2020-05-18 01:08:57
阅读次数：
229
1 重点： 1.1 reduce demo组成 1.2 准备数据 1.3 并行计算 2 规约操作实战案例 测试类： package com.imooc.zhangxiaoxi.stream; import com.alibaba.fastjson.JSONObject; import com.goo ...
分类：
编程语言 时间：
2020-05-10 10:24:59
阅读次数：
65
一、集群CLUSTER计算机集群Cluster，可以把多台计算机连接在一起进行使用，平均分配资源。集群总的每个计算机被称为一个节点，节点可增可减，在许多个节点中虚拟出一台计算机供用户使用。用户始终感觉到是一台计算机。当下流行的集群技术可以分为：HA高可用集群、负载均衡集群、并行计算集群。二、HA高可用集群1、HighavailabilityCluster高可用群集，简称HAC；2、前面已经讲过两次
分类：
其他好文 时间：
2020-05-08 16:30:20
阅读次数：
67
1 介绍 1.1 概念 面向批处理的分布式计算框架 一种编程模型：MapReduce程序被分为Map（映射）阶段和Reduce（化简）阶段 1.2 核心思想 分而治之，并行计算 移动计算，而非移动数据 1.3 特点 计算跟着数据走 良好的扩展性：计算能力随着节点数增加，近似线性递增 高容错 状态监控 ...
分类：
其他好文 时间：
2020-05-07 00:30:19
阅读次数：
80
yhq 查看任务队列 yhi 查看节点信息 vi /proc/cpuinfo > 查看CPU的信息 yhalloc -w cn13342 强制任务分配 ssh cn488 进入计算节点cn488 top 查看信息 按下d 调整刷新频率 exit 退出节点 yhrun *** 分配任务 编译程序必须在 ...
分类：
其他好文 时间：
2020-05-06 11:54:47
阅读次数：
57
