在使用ETL处理海量数据时，必须小心设计ETL的各个Task组件，“锱铢必较”，以最快的速度和最小的资源消耗，完成既定的数据处理任务。在处理数据源提取时，数据的大小由两个方面决定：数据行的宽度和数据行的数量，为了减少ETL运行的时间，可以从源数据的提取上做优化设计，从数据源的输入上控制数据的数量和大 ...
分类：
其他好文 时间：
2017-05-03 11:33:35
阅读次数：
186
Hadoop 的优势 Hadoop 是 一 个 能 够 让 用 户 轻 松 架 构 和 使 用 的 分 布 式 计 算 平 台。 用 户 可 以 轻 松 地 在Hadoop 上开发执行处理海量数据的应用程序。它主要有下面几个长处: 1.高可靠性。Hadoop 按位存储和处理数据的能力值得人们信赖。 ...
分类：
其他好文 时间：
2017-04-28 13:40:17
阅读次数：
109
第1章：初识Java 1.1 计算机的基础知识 1.1.1 计算机 计算机（Computer）全称：电子计算机，俗称电脑。是一种能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。由硬件和软件所组成，没有安装任何软件的计算机称为裸机。常见的形式有台式计算机、笔记本计算机、大型计算机等。 计 ...
分类：
编程语言 时间：
2017-04-26 13:50:47
阅读次数：
203
1、离线数据分析流程 一个应用广泛的数据分析系统：“web日志数据挖掘” 1.1 需求分析 1.1.1 案例名称 “网站或APP点击流日志数据挖掘系统”。 1.1.2 案例需求描述 “Web点击流日志”包含着网站运营很重要的信息，通过日志分析，我们可以知道网站的访问量，哪个网页访问人数最多，哪个网页 ...
分类：
其他好文 时间：
2017-04-24 12:16:38
阅读次数：
352
NoSQL具有如下特点： 处理大规模数据 运行在pc服务机群上 轻松解决性能瓶颈 适用于如下场景： 对数据高并发处理 对大数据高效率存储和访问 对数据高可用及高扩展 特点：非关系,分布,开源,可扩展,高速内存操作,适合运行在廉价的pc服务器上分布式处理海量数据,高级的key-value存储系统,可以 ...
分类：
其他好文 时间：
2017-03-30 16:14:55
阅读次数：
212
计算机基础和操作系统基础计算机为什么叫电子计算机（因为他永远是二进制来运行）计算机（computer）俗称电脑，是现代一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动、高速处理海量数据的现代化智能电..
分类：
其他好文 时间：
2017-03-21 13:20:47
阅读次数：
350
什么是计算机？ 计算机（computer）俗称电脑，是现代一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。 程序自动化：可以将预先编好的程序组纳入计算机内存，在程序控制下，计算机可以连续、自动地 ...
分类：
其他好文 时间：
2017-03-12 14:42:14
阅读次数：
174
什么是计算机？ 计算机（computer）俗称电脑，是现代一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。 计算机发展 1946年2月14日世界上第一台电子计算机“电子数字积分计算机”（ENIA ...
分类：
其他好文 时间：
2017-03-10 20:31:56
阅读次数：
273
计算机俗称电脑，是现代一种用于高速计算的电子计算机器，可以进行数值计算，又可以进行逻辑计算，还具有存储记忆功能。是能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。计算机的历史发展：1946年~1958年第一代计算机诞生叫做电子管数字机。1958年~1964年第..
分类：
其他好文 时间：
2017-03-07 23:28:39
阅读次数：
376
A:什么是计算机?计算机在生活中的应用举例 计算机（Computer）全称：电子计算机，俗称电脑。是一种能够按照程序运行，自动、高速处理海量数据的现代化智能电子设备。由硬件和软件所组成，没有安装任何软件的计算机称为裸机。常见的形式有台式计算机、笔记本计算机、大型计算机等。 应用举例 1：科学计算 2 ...
分类：
其他好文 时间：
2017-02-23 00:06:17
阅读次数：
211
