今天在两台MySQL服务器之间导数据，因为另一个MySQL服务器是测试用的，差一个月的数据，从现有MySQL服务器select到一个文件，具体语句是：select * from news where ine_time>="2010-02-01" and ine_time <"2010-03-01" ...
分类：
数据库 时间：
2015-01-15 12:40:13
阅读次数：
154
通过Sqoop实现Mysql / Oracle 与HDFS / Hbase互导数据\下文将重点说明通过Sqoop实现Mysql与HDFS互导数据，Mysql与Hbase,Oracle与Hbase的互导最后给出命令。一、Mysql与HDFS互导数据环境：宿主机器操作系统为Win7，Mysql安装在宿主...
分类：
数据库 时间：
2014-12-30 22:03:25
阅读次数：
290
需求1、高效率的以excel表格的方式导入多条数据。2、以身份证号为唯一标识，如果身份证号已存在，则该条数据不导入。分析刚开始的时候是传统的做法，解析excel数据，获取单个对象，判断身份证是否已存在表中，若没有则插入数据库。否则pass结果数据才几百条的时候，导数据都花了10分钟才导入完毕。实在太...
分类：
其他好文 时间：
2014-12-30 16:55:14
阅读次数：
202
从Erp库中把数据导入到 BanChe56 的库。 写一个存储过程。CREATE proc [dbo].[Dev_MoveTableData]( @ToTable varchar(50), @FromTable varchar(50) , @useId bit , @IDFrom int ,@exe...
分类：
其他好文 时间：
2014-12-21 21:51:33
阅读次数：
184
http://www.wfuyu.com/Internet/19955.html为了生产库释放部份资源，需要将API模块迁移到mysql中，及需要导数据。尝试了oracle to mysql工具，迁移时报错不说，这么大的数据量，用这类简陋的工具不大可靠。意外发现平时用的http://www.wfuy...
分类：
数据库 时间：
2014-12-19 17:05:24
阅读次数：
232
实际工程应用中，从数据库导出数据创建索引再常见不过了，现在实验一下从数据库导入数据创建索引。一、版本说明Solr版本：4.7.0数据库：sqlserver2005二、配置步骤1、 准备的jar包1） solr-dataimporthandler-extras-4.7.0.jar；在solr发布包so...
分类：
数据库 时间：
2014-12-12 16:18:07
阅读次数：
341
今天现场的兄弟打电话来说，在开发库上（win7 64bit）刚安装11.2.0.1.0后,先是用数据泵导数据有问题，好不容易解决，接着执行SQL报错，简单的SQL不报错，只要几张表关联的就会报错，于是把现场的日志拿回来分享。对于这种ORA-00600的错误，都是oracle的bug，只有求助于metalink。
*** 2014-11-25 11:14:06.444
ORA-00600: 内部...
分类：
其他好文 时间：
2014-11-25 12:44:40
阅读次数：
203
[ERROR]/usr/sbin/mysqld:Thetable‘cps_effect_confirm_log_1301‘is今天对一个数据库恢复数据，是一个25G的库，在执行一半是，出现这样的报错一，查看的磁盘空间‘df-dh看到mysql的目录（不是安装目录）没有问题。二，打开mysql的配置文件my.cnf修改两个参数的大小（默认是16）..
分类：
数据库 时间：
2014-11-21 16:31:55
阅读次数：
246
今天玩BCP导入数据的时候，有文件格式，有中文字符串问题……以下是历程，和大家分享一下，希望不要走我的弯路主要那个表是一个翻译表，一个文件里面内涵几十种语言，所以很容易发现问题。0、使用最常用的语句导数据 bcp DB.TBOwner.TB in File -S -U -P -r -t -c 来到....
分类：
数据库 时间：
2014-11-14 01:32:28
阅读次数：
262
原文:c#分页读取GB文本文件应用场景： a.我在做BI开发测试的时候，有可能面对source文件数GB的情况，如果使用一般的文本编辑器，则会卡死，或要等很久才能显示出来。
b.有时候，我们使用ascii(01)或ascii(02)作为行或列的分隔符，这样的临时文件用于导数据到DB,如果文件导入过程...
