官方TEZUI需要TEZ6+hadoop2.6.0其实TEZUITEZ0.53+hadoop2.4.0+也可以玩只要hadoop有timelineserver但是hadoop2.4.0hadoop2.5.0timelineserver不支持跨域请求。。所以用ambari2.2中的tezview来搭建可以实现,并且方便快捷。tez-site.xml<configuration><property>&l..
分类:
其他好文 时间:
2015-05-05 19:57:59
阅读次数:
3043
IT-培训基于Greenplum Hadoop分布式平台的大数据解决方案及商业应用案例剖析Hadoop2.0_YARN_Spark_Storm_Tez技术培训视频教程基于IBM Cognos Report studio技术的商业智能解决方案(广播分发报表、EVENT STUDIO)基于IBM Cog...
分类:
其他好文 时间:
2015-04-13 22:24:18
阅读次数:
392
tez版本:0.5.3
pig版本:0.14.0
解决办法:
将tez.task.scale.memory.reserve-fraction 设置的大点。如下:
set tez.task.scale.memory.reserve-fraction 0.7d ;
报错详情见下:
cause TezChild exit.:java.lang.OutOf...
分类:
其他好文 时间:
2015-02-27 17:09:36
阅读次数:
262
Tez
http://www.infoq.com/cn/articles/apache-tez-saha-murthy
http://hortonworks.com/blog/apache-tez-a-new-chapter-in-hadoop-data-processing/
http://www.cnblogs.com/fxjwind/p/3377695.html
http:/...
分类:
其他好文 时间:
2015-01-27 18:32:26
阅读次数:
300
最近集群准备升级到cdh5.2.0,并使用tez,在测试集群cdh5.2.0已经稳定运行了很长时间,因此开始折腾hiveontez了,期间遇到不少问题,这里记录下。hiveontez的部署比较简单,可以参考wiki.主要注意几个地方1.编译的时候mvncleanpackage-Dtar-DskipTests=true-Dmaven.javadoc.ski..
分类:
其他好文 时间:
2015-01-15 01:52:44
阅读次数:
1156
在测试hive0.14.0ontez时遇到的问题比较多:1.在使用cdh5.2.0+hive0.14.0+tez-0.5.0测试时,首先遇到下面的问题java.lang.NoSuchMethodError:org.apache.tez.dag.api.client.Progress.getFailedTaskAttemptCount()I
atorg.apache.hadoop.hive.ql.exec.tez.TezJobMonitor.printS..
分类:
其他好文 时间:
2015-01-15 01:50:47
阅读次数:
441
子曰:君子食无求饱,居无求安,敏于事而慎于言,就有道而正焉,可谓好学也已。 译文:君子吃不求太饱,住不求太舒适,做事勤快,说话谨慎,向道德高的人学习,并能改正自己的缺点,这样就可以称得上好学了。 最近要把CDH的版本换成了5.3.0,hive的版本从0.12换成了0.13,升级完成后...
分类:
其他好文 时间:
2015-01-08 14:38:34
阅读次数:
427
Interesting ReadingsBig Data Benchmark– Benchmark of Redshift, Hive, Shark, Impala and Stiger/Tez.NoSQL Comparison– Cassandra vs MongoDB vs CouchDB vs...
分类:
其他好文 时间:
2015-01-04 11:04:53
阅读次数:
401
前两篇文章介绍了docker的基本命令如何安装hadoop那么大家会比较了解docker的基本语法的安装过程。那么咱们今天来一起安装一下hive。安装1、下载gitHub,地址:https://github.com/prasanthj/docker-hive-on-tez。如果背墙了,可以选择下载z...
分类:
其他好文 时间:
2014-12-16 18:51:47
阅读次数:
841
文章来源:大牛笔记
HBase,一个NoSQL数据库,可存储大量非关系型数据。
HBase,可以用HBase shell进行操作,也可以用HBase Java api进行操作。HBase虽然是一个数据库,但是它的查询语句,很不太好用。要是能像使用Mysql等关系型数据库一样用sql语句操作HBase,那就很Perfect了。
现有工具有很多Hive,Tez,Impala,Shar...
分类:
数据库 时间:
2014-12-02 13:34:24
阅读次数:
783