1问题描述和原因分析从clouderamanager界面进入Oozie的web界面的时候出现下面的错误原因是oozie的/var/lib/oozie目录里缺少EXT的包官网给出解决方案链接http://cdh1.hadoop.com:11000/oozie/docs/DG_QuickStart.html其中特别需要注意的一点是Ext包必须是2.2版本的，高了或低了..
分类：
Web程序 时间：
2015-05-08 20:25:29
阅读次数：
329
今天同事在oozie的workflow中执行一个hive查询，但是直接就报异常：Variable substitution depth too large:40，从网上查询可知，可以确认是由于语句中使用了过多的变量导致，在hive以前的版本中，这个限制是写死...
分类：
其他好文 时间：
2015-04-07 12:18:00
阅读次数：
977
hive的变量传递设置今天同事在oozie的workflow中执行一个hive查询，但是直接就报异常：Variable substitution depth too large:40，从网上查询可知，可以确认是由于语句中使用了过多的变量导致，在hive以前的版本中，这个限制是写死的40个，查询Hive的最新的原代码，虽然判断的位置的提示信息已经变化，但是原理一样...
分类：
其他好文 时间：
2015-04-07 09:48:14
阅读次数：
192
介绍Azkaban是twitter出的一个任务调度系统，操作比Oozie要简单很多而且非常直观，提供的功能比较简单。Azkaban以Flow为执行单元进行定时调度，Flow就是预定义好的由一个或多个可存在依赖关系的Job组成的工作流。Azkaban的官方主页是http://azkaban.githu...
分类：
其他好文 时间：
2015-03-20 16:22:16
阅读次数：
617
Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra,...
分类：
其他好文 时间：
2015-03-13 12:28:34
阅读次数：
218
1，E0508: User [?] not authorized for WF job […… jobid] 很明显验证问题， 修改 oozie-site.xml中节点为 oozie.service.AuthorizationService.security.enabled false Specif...
简单的说Oozie是一个工作流引擎。只不过它是一个基于Hadoop的工作流引擎，在实际工作中，遇到对数据进行一连串的操作的时候很实用，不需要自己写一些处理代码了，只需要定义好各个action，然后把他们串在一个工作流里面就可以自动执行了。对于大数据的分析工作非常有用。本教程说明了oozie的概念、安装和使用，通过一个例子来让大家感性的认识oozie工作流...
分类：
其他好文 时间：
2015-03-04 17:03:19
阅读次数：
522
Oozie安装
一．准备
默认hadoop，maven，mysql已经安装，我的hadoop是2.5.0
下载oozie安装包：oozie-4.1.0.tar.gz http://mirror.bit.edu.cn/apache/oozie/
下载ext-2.2.zip
http://oozie.apache.org/docs/4.0.1/DG_QuickStart.ht...
分类：
其他好文 时间：
2015-02-28 14:45:23
阅读次数：
2933
Hadoop也有web管理控制台，而且还很华丽，它的名字叫HUE。通过HUE可以管理Hadoop常见的组件。下面用一幅图说明HUE能管理哪些组件。除了Oozie，LDAP SAML和Solr以外，前面的课程都说过了，Oozie是一个工作流组件，在下一课讲解，LDAP是一个用户密码的管理中心，负责用户的登陆。...
分类：
其他好文 时间：
2015-02-12 09:16:58
阅读次数：
6102
mapreduce程序 ： 描述： 提取出二进制文件里的短链，并统计排序（由大到小排序）思路：HotlinkCount： 1 /* 2 * Copyright (c) EEFUNG 2014 All Rights Reserved 3 * 4 * 统计每个连接出现的频率 5 * ...
分类：
其他好文 时间：
2015-02-05 17:52:42
阅读次数：
772
