1.1 产品概述
VDataHub基于Apache Sqoop，最初定位是用于将关系数据库中的数据导入Hadoop/Hive/HBase。Sqoop基于Hadoop的MapReduce来完成数据导入导出工作，提供了很好的容错性。刚开始项目组也仅仅直接采用社区版本来完成数据导入导出。但在使用过程中，我们发现有很多地方是Sqoop现有版本没法支持的，如果不解决，是不能用于现有数据平台建设中的。
基...
分类：
其他好文 时间：
2014-11-21 18:50:54
阅读次数：
317
数据库导入导出：导出：右键需要导出的数据库→任务→导出数据→…………导入：右键需要导入到的数据库→任务→导入数据→编辑映射→启用标志插入√→根据需要选择删除原有行或者增添行truncate用法：truncate table score →清空score表中所有数据功能与delete相同，但delet...
分类：
其他好文 时间：
2014-11-21 18:27:32
阅读次数：
183
总所周知，用exp/imp对数据库进行逻辑备份，包括表，用户，整个数据库，我们通常所熟悉的是使用命令行指定参数的方式来做的。下面我来演示一下不太常用的以交互方式的操作，操作很简单，就是只要输入exp/imp的命令，以交互方式提供导入导出所需的参数来完成。虽然这种方式没有实际的应用意义，但作为Oracle提供的一种方法，我们也是有必要熟悉一下的。
环境：Oracle 10.2.0....
分类：
其他好文 时间：
2014-11-21 14:27:10
阅读次数：
200
>exp -help >imp -help 数据字典表：dba_data_files:数据文件表 查看数据文件名及其所属表空间名： 设置每行显示长度：set linesize 300; 设置每页显示列数：set pagesize 30; 设置数据文件名显示长度：col file_name for a...
分类：
数据库 时间：
2014-11-21 14:09:05
阅读次数：
254
CSV是逗号分隔文件(Comma Separated Values)的首字母英文缩写，是一种用来存储数据的纯文本格式，通常用于电子表格或数据库软件。在 CSV文件中，数据“栏”以逗号分隔，可允许程序通过读取文件为数据重新创建正确的栏结构，并在每次遇到逗号时开始新的一栏。如：
1,张三,男
2,李四,男
3,小红,女
1、CSV导入/导出封装类
package com.pa...
分类：
编程语言 时间：
2014-11-20 21:59:54
阅读次数：
352
1、引言1.1解决哪些问题 现在很多公司用的导出基本上采用的通过gridView导出excel,此种导出存在以下几种问题 1、数据量大的时候有时导出有时会让浏览器卡死，因为导出的excel不是真正的excel，是html格式的，只是用excel打开，查看方式只需用记事本或其他文本编辑器打开就...
分类：
Web程序 时间：
2014-11-20 16:52:00
阅读次数：
190
MS的电子表格（Excel）是Office的重要成员，是保存统计数据的一种常用格式。作为办公文档，势必要涉及到的电子文档的交换，Excel是一种在企业中非常通用的文件格式，打印和管理也比较方便。在一个Java应用中，将一部分数据生成Excel格式，是与其他系统无缝连接的重要手段。http://www...
最近在公司里一直从事服务类的工作，涉及到很多excel的处理。部分工作内容是每天重复的，只是每天的数据不同而已。我遇到的一个问题是客户每天发送的几种数据有些excel中的字段顺序是一致的，有些是不一致的，而对数据汇总就要一列一列的去调整，剪切，复制，粘贴，很麻烦。还有类似导入、导出数据、类似的问题。熟悉EXCEL的人肯定知道，其实EXCEL中为我们提供了很多常用的功能，比如筛选、排序、透视表统计等...
ORACLE导出工具exp的使用：1、将数据库TEST（远程的数据库必须为连接标志符）完全导出，用户名system，密码manager，导出到D:\daochu.dmp中： exp system/manager@TEST file=d:\daochu.dmp full=y2、将数据库中syste.....
分类：
数据库 时间：
2014-11-17 22:36:29
阅读次数：
293
Mysql中文乱码以及导出为sql语句和Excel问题解决这几天基于Heritrix写了一个爬虫，用到mysql，在导入导出数据时，遇到一些乱码问题，好不容易解决了，记录一下，以备查看。一、导出数据。先说明一下自己的环境：Mac OS X 10.8.3, MySQL Community Server...
分类：
数据库 时间：
2014-11-17 17:21:00
阅读次数：
157
