DataSet ds = new DataSet(); using (SqlConnection conn = new SqlConnection(@"data source=.\sqlxu;initial catalog=NationalUnion20140717;persist security...
分类：
其他好文 时间：
2014-08-18 17:55:02
阅读次数：
249
sqoop从oracle定时增量导入数据到hive感谢：http://blog.sina.com.cn/s/blog_3fe961ae01019a4l.htmlhttp://f.dataguru.cn/thread-94073-1-1.html sqoop.metastore.client.reco...
分类：
数据库 时间：
2014-08-14 16:09:48
阅读次数：
330
在使用命令导数据过程中，出现如下错误sqoop import --hive-import --connect jdbc:oracle:thin:@192.168.29.16:1521/testdb --username NAME --passord PASS --verbose -m 1 --tab...
分类：
数据库 时间：
2014-08-13 00:36:34
阅读次数：
602
mysql的主从模式配置1、改主库配置文件：[mysqld]log=c:/a.loglog-bin=mysql-binserver-id=12、授权，导数据：grant replication slave on *.* TO 'replication'@'192.168.234.123' ident...
分类：
数据库 时间：
2014-08-08 01:56:25
阅读次数：
308
最近在线上往hbase导数据，因为hbase写入能力比较强，没有太在意写的问题。让业务方进行历史数据的导入操作，中间发现一个问题，写入速度太快，并且业务数据集中到其中一个region，这个region无法split掉，处于不可用状态。这里描述一整个过程—— 事情的起因：业务方按照userid和...
分类：
其他好文 时间：
2014-08-04 21:10:47
阅读次数：
297
从hive将数据导出到mysqlhttp://abloz.com2012.7.20author:周海汉在上一篇文章《用sqoop进行mysql和hdfs系统间的数据互导》中，提到sqoop可以让RDBMS和HDFS之间互导数据，并且也支持从mysql中导入到HBase，但从HBase直接导入mysq...
分类：
数据库 时间：
2014-07-18 20:00:07
阅读次数：
482
1、使用游标实现跨数据库导数据参考存储过程： ALTER proc [dbo].[Nsp_SiPingElectricityData]asdeclare @DANo Char(32)declare @DATime Datetimedeclare @LogTi...
分类：
其他好文 时间：
2014-07-14 19:50:30
阅读次数：
357
1、调用对方接口，设置count，跟踪每次调用次数，看看调用接口总次数是否跟订单数据总量一致。记录错误日志。记录调用失败的订单号。这是从调用方的角度跟踪检测数据。2、将2014年每个月调用方和接收方的数据库中各个状态订单总量进行对比，发现订单量不一致的状态。让接收方将数据库中这些状态的订单号和状态导...
分类：
其他好文 时间：
2014-07-07 17:36:36
阅读次数：
177
读取4个文件内容,格式化数据,升序,显示每个文件前3个数据julie.txt2.59,2.11,2:11,2:23,3-10,2-23,3:10,3.21,3-21james.txt2-34,3:21,2.34,2.45,3.01,2:01,2:01,3:10,2-22sarah.txt2:58,2...
分类：
编程语言 时间：
2014-06-28 19:58:54
阅读次数：
279
一：sqoop增量导入的两种方式Incremental import arguments:ArgumentDescription--check-column (col)Specifies the column to be examined when determining which rows to...
分类：
数据库 时间：
2014-06-23 00:58:09
阅读次数：
345
