运行任务的时候,有一些中间数据需要写集群的worker的目录,默认是写/tmp目录spark-env.sh 增加export SPARK_WORKER_DIR=/data/spark/workexport SPARK_LOCAL_DIRS=/data/spark/data需要先创建好目录给777权限...
分类:
其他好文 时间:
2015-11-17 12:44:18
阅读次数:
131
SQL Server表表的类型:①临时表临时表可用来处理中间数据或者用临时表与其它连接共享进行中的工作。临时表只能放在tempdb中。私有临时表(#)全局临时表(##)②系统表用来存储所有数据库对象、数据类型、约束、配置选项等相关信息的表。属性的数据类型1.基本数据类型:①精确数字类型②近似数字类型...
分类:
数据库 时间:
2015-11-14 00:50:02
阅读次数:
335
一、SSH简介SSH(全称SecureShell)是一种加密的网络协议。使用该协议的数据将被加密,如果在传输中间数据泄漏,也可以确保没有人能读取出有用信息。要使用SSH,目标机器应该安装SSH服务端应用程序,因为SSH是基于客户-服务模式的。当你想安全的远程连接到主机,可中间的网络(..
分类:
其他好文 时间:
2015-10-05 07:06:50
阅读次数:
200
服务器内存修改各应用服务器的内存配置方法不尽相同,如下列出了常用服务器的JVM参数(-Xms,-Xmx)配置方法。JVM参数定义:- Xms: 初始化内存大小- Xmx: 可以使用的最大内存示例工具以下示例工具:报表开发工具FineReportTomcat服务器内存修改1. 问题描述java应用程序运行过程中会使用web应用服务器的内存,如执行报表获取的数据,运算的中间数据等都需要暂存在服务器内存...
分类:
其他好文 时间:
2015-09-14 16:49:15
阅读次数:
214
1>关系数据库规范化是一个关系数据库来解决(插入异常、删除异常和数据冗余)问题介绍。2>在数据管理技术的发展历程,人工经验管理阶段、文件系统和数据库系统阶段阶段。在这些阶段的过程中。间(数据库系统阶段)。3>数据库(DB)、数据库系统(DBS)、数据库管理系统(DBMS)三者之间的关系(DBS包含D...
分类:
数据库 时间:
2015-09-10 16:04:09
阅读次数:
205
参数:io.sort.mb(default 100) 当map task开始运算,并产生中间数据时,其产生的中间结果并非直接就简单的写入磁盘。 而是会利用到了内存buffer来进行已经产生的部分结果的缓存, 并在内存buffer中进行一些预排...
分类:
其他好文 时间:
2015-09-02 12:03:19
阅读次数:
165
??
今天在做sql server 的数据查询时,需要用到跨服务器连接,在这里记录一下,如何在sql server 中,使用跨服务器查询的方法,有以下步骤。
/*
创建中间数据库链接
exec sp_addlinkedserver 'MiddleData', ' ', 'SQLOLEDB', '数据库连接实例,或者IP'
exec sp_addlinkedsrvlogin 'Middl...
分类:
数据库 时间:
2015-08-12 11:36:45
阅读次数:
177
基本思想
希尔排序是基于插入排序的,又叫缩小增量排序。
在插入排序中,标记符左边的元素是有序的,右边的是没有排过序的,这个算法取出标记符所指向的数据,存入一个临时变量,接着,在左边有序的数组中找到临时变量应该插入的位置,然后将插入位置之后的元素依次后移一位,最后插入临时变量中的数据。
试想,假如有一个很小的数据项在靠近右端的位置上,把这个数据项插入到有序数组中时,将会有大量的中间数据项需要右...
分类:
编程语言 时间:
2015-08-11 10:13:53
阅读次数:
156
这一节为主界面加一个顶部区域和底部区域。一个管理系统的界面可以粗分为顶部标题部分、中间数据展示和处理的部分、底部备注和状态部分。在增加这二个区域之前,我们先在MainModel.js中加入一些数据。 1 Ext.define('app.view.main.MainModel', { 2 ex...
分类:
Web程序 时间:
2015-08-05 10:13:24
阅读次数:
150
--摘自潇湘隐者临时表概念 临时表就是用来暂时保存临时数据(亦或叫中间数据)的一个数据库对象,它和普通表有些类似,然而又有很大区别。它只能存储在临时表空间,而非用户的表空间。ORACLE临时表是会话或事务级别的,只对当前会话或事务可见。每个会话只能查看和修改自己的数据。 临时表语法临时表分类ORAC...
分类:
数据库 时间:
2015-06-29 16:35:05
阅读次数:
142