如何运行具有奇点的NGC深度学习容器 How to Run NGC Deep Learning Containers with Singularity 高性能计算机和人工智能的融合使新的科学突破成为可能。现在需要在同一个系统上同时部署HPC和AI工作负载。 支持HPC和AI工作负载所需的软件环境的复 ...
分类：
其他好文 时间：
2020-06-20 16:14:09
阅读次数：
71
Flink：ApacheFlink是一个计算框架和分布式处理引擎，用于对***和有界数据流进行有状态计算。其针对数据流的分布式计算提供了数据分布、数据通信以及容错机制等功能。Flink主要特点：1、高吞吐、低延迟、纯流式架构；2、支持对乱序事件的处理；3、有状态、提供exactly-once计算；4、高度灵活的窗口机制；5、失败恢复、故障转移、水平扩展；6、批处理、流处理统一的APINBI大数据可视
分类：
其他好文 时间：
2020-06-11 21:28:52
阅读次数：
114
? 现如今每个公司都有自己的大数据平台和大数据团队，可以看出大数据建设在公司的重要地位，不管是用于做数据分析、BI还是做用于机器学习、人工智能等领域，大数据都是基础，海量数据成为了互联网公司的重要资产。 今天这一份书单，我们将推荐几本综合介绍大数据平台和技术栈的优质书籍，帮各位对大数据技术感兴趣的小 ...
分类：
其他好文 时间：
2020-06-09 23:47:55
阅读次数：
163
恢复内容开始 大数据的分布式计算框架目前使用的最多的就是hadoop的mapReduce和Spark，mapReducehe和Spark之间的最大区别是前者较偏向于离线处理，而后者重视实现性，下面主要介绍mapReducehe和Spark两者的shuffle过程。 MapReduce的Shuffle ...
分类：
其他好文 时间：
2020-06-08 19:17:29
阅读次数：
88
#简介 IBM MQ（IBM Message Queue）是IBM的一款商业消息中间产品，适用于分布式计算环境或异构系统之中。 消息队列技术是分布式应用间交换信息的一种技术。消息队列可驻留在内存或磁盘上,队列存储消息直到它们被应用程序读走。 #安装 1、官网下载地址：https://www.ibm. ...
分类：
Web程序 时间：
2020-06-04 21:28:12
阅读次数：
94
最近工作中用了了Hadoop，比如用Hadoop来处理广告的一些pv量数据、点击数据等，最后统计后给运营展示每个广告的数据报表 首先自己了解了一些关于Hadoop的概念知识 hadoop平台提供了分布式存储（hdfs），分布式计算（mapredduce），任务调度（YARN）、对象存储（Ozone） ...
分类：
其他好文 时间：
2020-05-30 20:22:33
阅读次数：
94
# UUID 生成唯一ID # uuid 是Python内置模块，主要有五种算法。 import uuid # uuid1() 基于时间戳 a1 = uuid.uuid1() print('uuid1()：', a1) # uuid2() 基于分布式计算环境DCE（Python中没有这个函数方法） ...
分类：
编程语言 时间：
2020-05-29 12:06:40
阅读次数：
100
GRD云渲染主要用于什么领域?GRD属于边缘计算的公链原理是将世界上多余的显卡GPU算力汇总，为需求着提供渲染计算服务，供与求都在公链上完成消费和奖励。是一个基于区块链分布式计算的技术，致力于将全球PC端的闲余计算能力分配给需要大规模画面渲染的企业客户。那么GRD云渲染主要用于什么领域?渲染农场提供全方位计算、存储、网络和安全服务，海量计算资源随用随取，无需人力维护，极具成本优势。影视特效海量资源
分类：
其他好文 时间：
2020-05-14 17:18:04
阅读次数：
92
1 介绍 1.1 概念 面向批处理的分布式计算框架 一种编程模型：MapReduce程序被分为Map（映射）阶段和Reduce（化简）阶段 1.2 核心思想 分而治之，并行计算 移动计算，而非移动数据 1.3 特点 计算跟着数据走 良好的扩展性：计算能力随着节点数增加，近似线性递增 高容错 状态监控 ...
分类：
其他好文 时间：
2020-05-07 00:30:19
阅读次数：
80
操作系统 单用户系统 DOS 批处理系统 多道程序系统 分时系统 多个人公用一台计算机 个人计算机 分布式计算机 云计算的概念 Multics 兼容分时系统 1964年， 由贝尔实验室(Bell)、麻省理工学院(MIT)及奇异公司(GE美国通用电气公司)共同发起了Multics（多路信息计 算系统） ...
分类：
其他好文 时间：
2020-04-30 15:14:09
阅读次数：
65
