数据库配置db-data-config.xml
这里需要配置数据源,字段,以及取得字段的方法。
当mysql数据库中表结构如下时:
可以这么配置:
url="jdbc:mysql://localhost/test"...
分类:
数据库 时间:
2015-06-02 17:53:24
阅读次数:
413
hive编程指南---http://yunpan.cn/cwkc5r2hIDj5G (提取码:3b64)
更多精彩内容请关注:http://bbs.superwu.cn
关注超人学院微信二维码:
关注超人学院java免费学习交流群:...
分类:
其他好文 时间:
2015-06-02 17:51:13
阅读次数:
100
bulk-load的作用是用mapreduce的方式将hdfs上的文件装载到hbase中,对于海量数据装载入hbase非常有用,参考http://hbase.apache.org/docs/r0.89.20100621/bulk-loads.html:hbase提供了现成的程序将hdfs上的文件导入hbase,即bulk-load方式。它包括两个步骤(也可以一次完成):..
分类:
其他好文 时间:
2015-06-01 20:41:59
阅读次数:
147
如果一个标识符或选择e引用了数个类的成员,则将使用引用的上下文来推断唯一的成员。使用的方法将依赖于e是否被用作一个函数。设A是e引用的成员的集合。首先假定e作为函数出现在应用中,比如e(args)。如果在A中有且仅有一个可选成员是一个(可能是多态)方法类型,其元数与给出..
分类:
其他好文 时间:
2015-06-01 20:41:34
阅读次数:
129
Hadoop技术内幕:深入解析MapReduce架构设计与实现原理http://yunpan.cn/cwBBhLYTBnVRG(提取码:1810)
分类:
其他好文 时间:
2015-06-01 20:41:31
阅读次数:
98
一、请求应答协议和RTT:Redis是一种典型的基于C/S模型的TCP服务器。在客户端与服务器的通讯过程中,通常都是客户端率先发起请求,服务器在接收到请求后执行相应的任务,最后再将获取的数据或处理结果以应答的方式发送给客户端。在此过程中,客户端都会以阻塞的方式等待服务器..
分类:
其他好文 时间:
2015-06-01 20:41:27
阅读次数:
128
Solr在不修改任务配置的情况下就可以使用查询功能,在web项目中应用可以直接URL进行访问Solr服务器例如:http://localhost:8080/solr/collection1/select?q=*%3A*&wt=xml&indent=true上面的意思就是查询名为collection1的SolrCore的所有内容用xml格式返回并且有缩进。..
分类:
其他好文 时间:
2015-06-01 20:41:03
阅读次数:
153
你已经看到实现有且只有一次被执行的语义时的复杂性。Trident这样做的好处把所有容错想过的逻辑都放在了State里面--作为一个用户,你并不需要自己去处理复杂的txid,存储多余的信息到数据库中,或者是任何其他类似的事情。你只需要写如下这样简单的code:TridentTopologytopolo..
概要本篇主要阐述在TaskRunner中执行的task其业务逻辑是如何被调用到的,另外试图讲清楚运行着的task其输入的数据从哪获取,处理的结果返回到哪里,如何返回。准备1.spark已经安装完毕2.spark运行在localmode或local-clustermodelocal-clustermodelocal-cluster模式也称为伪分..
分类:
Web程序 时间:
2015-06-01 20:40:37
阅读次数:
130
Hadoop源代码分析(MapTask辅助类I)MapTask的辅劣类主要针对Mapper的输入和输出。首先我们来看MapTask中用的的Mapper输入,在类图中,返部分位于右上角。MapTask.TrackedRecordReader是一个Wrapper,在原有输入RecordReader的基础上,添加了收集上报统计数据的功能。MapTask.S..
分类:
其他好文 时间:
2015-06-01 20:39:41
阅读次数:
127