首先介绍一下Shark的概念
Shark简单的说就是Spark上的Hive，其底层依赖于Hive引擎的
但是在Spark平台上，Shark的解析速度是Hive的几多倍
它就是Hive在Spark上的体现，并且是升级版，一个强大的数据仓库，并且是兼容Hive语法的下面给出一张来自网上的Shark构架图从图上可以看出，Spark的最底层大部分还是基于HDFS的，Shark中的数据信息等也是对应着H...
分类：
数据库 时间：
2015-05-15 09:11:25
阅读次数：
314
思维导图是一种革命性的思维工具，对于头脑风暴、项目规划或者将想法变为实际的步骤都是极佳的方式，更让人欣慰的是，现今多种多样的工具可以帮助大家构架思维导图、组织导图元素并保存下来便于后期使用。下面是L...
分类：
其他好文 时间：
2015-05-14 18:56:43
阅读次数：
158
为了使网站在高访问量、处理海量数据时可以稳定并以高效率运行，需要对网站架构进行系统的设计，从而实现网站高性能、易伸缩、可扩展、安全等各种技术目标。网站的架构模式是大型网站在小型网站演变时期总结的一些对于相同问题的解决办法、称之为架构模式。
下方主要是概念性的理解，具体操作在对各技术详细解释文档中。
（总共9点）
1.软件结构分层
概念：将系统在横向维度上切分为几个部分，每个部分负责一...
分类：
Web程序 时间：
2015-05-11 09:06:31
阅读次数：
129
现在我将来解释如何在C#中用WMI（Windows Management Instrumentation）来获取电脑的硬件信息。我们的目的是用WMI的api在C#下获取电脑的以下信息：物理处理器的数量
逻辑处理器的数量
位数
系统构架
内核数量在Visual Studio中创建一个控制台应用程序，并且右击引用然后选择“添加引用”，再选择“System.Management”。现在已经通过us...
背景 当下很多公司都依赖于数据分析来提升产品质量。各种各样的数据库构架（比如并行数据库）正应对了这样的需求，但其缺点是技术人员必须依赖SQL这样远不如其他编程语言方便的语言来处理数据。所以很多人都选择了MapReduce，因为这种模式下只需要设计Map和Reduce两个方程就够了，但是难以重复使用，维护，和优化也是这种模式的缺陷。
在这样的情况下，兼顾两者优点的Pig Latin应运而生。P...
分类：
其他好文 时间：
2015-05-09 10:17:52
阅读次数：
5156
3.1概要设计的主要内容不同的系统类型其概要设计的内容也不相同，通过概要设计准则我们可以根据实际情况确定概要设计的具体内容，但是一般来说，概要设计的内容可以包含系统构架、模块划分、系统接口、数据设计4个主要方面的内容。1.系统构架系统构架包含系统使用的软硬件技术平台及相关技术列表、系统的物理架构、物...
分类：
其他好文 时间：
2015-05-08 12:27:53
阅读次数：
129
作者：阮一峰日期：2014年5月22日网络应用程序，分为前端和后端两个部分。当前的发展趋势，就是前端设备层出不穷（手机、平板、桌面电脑、其他专用设备......）。因此，必须有一种统一的机制，方便不同的前端设备与后端进行通信。这导致API构架的流行，甚至出现"API First"的设计思想。REST...
一、安装ECshop ECShop是一款B2C独立网店系统，适合企业及个人快速构建个性化网上商店。系统是基于PHP语言及MYSQL数据库构架开发的跨平台开源程序。2006年3月推出以来1.0版以来，受到市场的检验，广受好评。 1.安装准备 ECshop最新版本为2.7.3，有UTF8和GBK两...
分类：
其他好文 时间：
2015-05-06 17:25:17
阅读次数：
217
一、前言为了解决大型网站面临的高并发访问、海量数据处理、高可靠运行等一系列问题与挑战，大型互联网公司在时间中提出了许多解决方案，以实现网站高性能、高可用、易伸缩性、可扩展、安全等各种技术架构目标。二、分层最常见的架构模式，将系统在横向维度上切分成几个部分，..
分类：
Web程序 时间：
2015-05-04 20:27:03
阅读次数：
300
一、MySQL最重要的、最与从不同的特性是它的存储引擎架构，这种构架的设计将查询处理及其它系统任务和数据的存储/提取相分离。第一层，服务层，最上层的服务并不是MySQL独有的，大多数基于网络的客户端/服务端的工具或者服务都有类似的架构。主要为请求做连接处理，授权认证，安全等。
第二层，核心层，大多数MySQL的核心服务功能都在这一层，包括查询解析，分析，优化，缓存，以及所有的内置函数（例如日期、时间、数学和加密函数），所有跨存储引擎的功能都在这一层实现：存储过程，触发器，视图等。...
分类：
数据库 时间：
2015-05-04 13:53:56
阅读次数：
138
