在Linux服务器上下载Jenkins下载地址:https://jenkins.io/zh/download/选择你的服务器对应的版本,我的是centos6,选择这个版本点击进去:命令行官方已给出,依次执行以下命令行sudowget-O/etc/yum.repos.d/jenkins.repohttps://pkg.jenkins.io/redhat-stable/jenkins.reposudo
分类:
Web程序 时间:
2019-08-03 23:24:40
阅读次数:
226
大数据的发展历程总体上可以划分为三个重要阶段,萌芽期、成熟期和大规模应用期,20世纪90年至21世纪初,为萌芽期,随着,一批商业智能工具和知识管理技术的开始和应用,度过了数据萌芽,21世纪前十年则为成熟期,主要标志为,大数据解决方案逐渐走向成熟,形成了并行计算与分布式系统两大核心技,谷歌的GFS和MapReduce等大数据技术受到追捧,Hadoop平台开始大行期道,2010年以后,为大规模应用期,
分类:
其他好文 时间:
2019-08-01 11:50:38
阅读次数:
132
网上有关于ERA-Interim 驱动WRF的帖子和用ERA5(模式层)驱动WRF的帖子。但没有ERA5气压层驱动的例子,以下是一些尝试 关于变量表Vtables (翻译自WRF手册 ,第3-39(61页)) 创建和编辑Vtables 虽然提供了众多数据集的Vtables,但是ungrib不可能以G ...
分类:
其他好文 时间:
2019-07-17 21:55:26
阅读次数:
208
第一,先探讨一个问题,一个写IO的流程,什么样就算完成一次IO操作了。 "Disk Caches,磁盘高速缓存。 将磁盘上的数据缓存在内存中,加速文件的读写。实际上,在一般情况下,read/write是只跟缓存打交道的。(当然,存在特殊情况。下面会说到。) read就直接从缓存读数据。如果要读的数据 ...
分类:
其他好文 时间:
2019-06-27 12:25:37
阅读次数:
149
1. 云计算的发展 云计算是IT技术不断发展的产物。 要理解云计算,需要对IT系统架构的发展过程有所认识。 IT系统架构的发展到目前为止大致可以分为3个阶段: 1> 物理机架构 这一阶段,应用部署和运行在物理机上。 比如企业要上一个ERP系统,如果规模不大,可以找3台物理机,分别部署Web服务器、应 ...
分类:
其他好文 时间:
2019-06-26 12:06:08
阅读次数:
175
请列出常用的raid类型及区别?请简要说明linux操作系统下你所了解的文件存储方案你了解linux内核调优吗?请介绍下调优的原则及相关参数。当linux操作系统中没有/etc/sysconfig/iptables文件时,如何恢复。在什么条件下可以用“service服务名start|stop”启动服务?请列举出常用的系统工具,如网络测试、io性能测试等。请说出你对NFS、SAN、NAS、GFS的理
分类:
其他好文 时间:
2019-06-15 10:17:06
阅读次数:
130
简述 HDFS(Hadoop Distributed File System),作为Google File System(GFS)的实现,是Hadoop项目的核心子项目,是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开发的,可以运行于廉价的商用服务器上。它所具有的高容错 ...
分类:
其他好文 时间:
2019-06-14 12:51:16
阅读次数:
114
人大:第13讲市面上主流的分布式文件系统(FS):(Hadoop的)HDFS,(Google的)GFS数据服务与键值对数据库:数据服务:data serving 数据服务:数据的简单读写 数据库事务:也算一种数据服务,但属于mission-critical,较为复杂的数据服务数据服务起源:优化布局日 ...
分类:
数据库 时间:
2019-06-09 00:43:45
阅读次数:
136
首先,提及大数据一词的概念。大数据本质还在于数据,但是它有着新的特征亮点。包括:数据来源广,数据格式多样化(结构化数据、非结构化数据、Excel文件、文本文件等)、数据量大(最少也是TB级别的、甚至可能是PB级别)、数据增长速度快等等。扩展讲大数据的4个基本特征,我们将进行下面额思考:1.数据来源广?广泛的数据来源从何而来,通过何种方式进行采集与汇总?相对应的我们出现Sqoop,Cammel,Da
分类:
其他好文 时间:
2019-06-02 11:44:27
阅读次数:
123
1、Hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统集成架构,用户可以在不了解分布式底层细节情况下,开发分布式程序,充分利用集群的威力来进行高速运算与存储,具有可靠、高效、可伸缩的特点Hadoop的核心是YARN,HDFS,Mapreduce,常用模块架构如下2、HDFS源自谷歌的GFS论文,发表于2013年10月,HDFS是GFS的克隆版,HDFS是Hadoop体系中
分类:
其他好文 时间:
2019-05-28 12:54:25
阅读次数:
145