hive和hadoop交互流程

标签：

1、通过用户界面提交SQL 驱动接收SQL
2、驱动将SQL传送给编译器
3、编译器获得SQL 检查语法、匹配资源、去metastore查询
4、metastore返回相应的数据库字段信息 优化SQL、产生执行计划
5、驱动接收执行计划 将执行计划发送执行引擎
6、执行引擎解析
6.1、 DDL操作：直接和metastore交互
create table t1(name string);
drop table t1;
6.1、 DML：直接读取数据，和namenode、datanode交互
select * from t1 limit 100;
select name form t1;

6.1、 执行MapReduce
跑MR job
返回结果集信息
select count(1) from t1;

hive和hadoop交互流程

标签：

原文地址：http://www.cnblogs.com/gypsysunny/p/5147282.html