1. 云计算的发展 云计算是IT技术不断发展的产物。 要理解云计算，需要对IT系统架构的发展过程有所认识。 IT系统架构的发展到目前为止大致可以分为3个阶段： 1> 物理机架构 这一阶段，应用部署和运行在物理机上。 比如企业要上一个ERP系统，如果规模不大，可以找3台物理机，分别部署Web服务器、应 ...
分类：
其他好文 时间：
2019-06-26 12:06:08
阅读次数：
175
请列出常用的raid类型及区别？请简要说明linux操作系统下你所了解的文件存储方案你了解linux内核调优吗？请介绍下调优的原则及相关参数。当linux操作系统中没有/etc/sysconfig/iptables文件时，如何恢复。在什么条件下可以用“service服务名start|stop”启动服务？请列举出常用的系统工具，如网络测试、io性能测试等。请说出你对NFS、SAN、NAS、GFS的理
分类：
其他好文 时间：
2019-06-15 10:17:06
阅读次数：
130
简述 HDFS（Hadoop Distributed File System），作为Google File System（GFS）的实现，是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错 ...
分类：
其他好文 时间：
2019-06-14 12:51:16
阅读次数：
114
人大:第13讲市面上主流的分布式文件系统(FS):(Hadoop的)HDFS，(Google的)GFS数据服务与键值对数据库:数据服务:data serving 数据服务:数据的简单读写 数据库事务:也算一种数据服务，但属于mission-critical，较为复杂的数据服务数据服务起源:优化布局日 ...
分类：
数据库 时间：
2019-06-09 00:43:45
阅读次数：
136
首先，提及大数据一词的概念。大数据本质还在于数据，但是它有着新的特征亮点。包括：数据来源广，数据格式多样化(结构化数据、非结构化数据、Excel文件、文本文件等)、数据量大(最少也是TB级别的、甚至可能是PB级别)、数据增长速度快等等。扩展讲大数据的4个基本特征，我们将进行下面额思考：1.数据来源广？广泛的数据来源从何而来，通过何种方式进行采集与汇总？相对应的我们出现Sqoop，Cammel，Da
分类：
其他好文 时间：
2019-06-02 11:44:27
阅读次数：
123
1、Hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点Hadoop的核心是YARN,HDFS,Mapreduce,常用模块架构如下2、HDFS源自谷歌的GFS论文，发表于2013年10月，HDFS是GFS的克隆版，HDFS是Hadoop体系中
分类：
其他好文 时间：
2019-05-28 12:54:25
阅读次数：
145
docker-dnsmasq支持通过web页面配置域名映射，镜像地址：https://hub.docker.com/r/jpillora/dnsmasq 使用步骤如下： 1、在Docker宿主上创建 /opt/dnsmasq.conf 配置文件 2、docker run启动容器 HTTP_USER： ...
分类：
其他好文 时间：
2019-05-07 12:53:26
阅读次数：
626
Hadoop的起源 2003-2004年，Google公布了部分GFS和MapReduce思想的细节，受此启发的Doug Cutting等人用2年的业余时间实现了DFS和MapReduce机制，使Nutch性能飙升。然后Yahoo招安Doug Gutting及其项目。 2005年，Hadoop作为L ...
分类：
其他好文 时间：
2019-05-06 11:45:14
阅读次数：
170
Pycharm激活 下载补丁 将文件jetbrains agent.jar放到Pycharm安装路径的bin文件夹里 修改配置文件 修改【pycharm.exe.vmoptions】文件和【pycharm64.exe.vmoptions】文件， 添加以下内容： 路径视情况而定 重启Pycharm 输 ...
分类：
其他好文 时间：
2019-05-05 14:37:30
阅读次数：
185
大数据（big data），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。 传统的数据处理技术已经无法胜任，需要催生新的技术。一套用来处理海量数据的软件工具应运而生，这就是大数据！ ...
分类：
其他好文 时间：
2019-04-27 14:46:32
阅读次数：
171
