码迷,mamicode.com
首页 > 数据库 > 详细

PLSQL_性能优化系列09_Oracle Partition Table大数据分区表

时间:2014-09-28 17:15:27      阅读:365      评论:0      收藏:0      [点我收藏+]

标签:des   style   blog   http   color   io   os   使用   ar   

2014-08-22 BaoXinjian

bubuko.com,布布扣一、摘要


1、分区表:

    随着表的不断增大,对于新纪录的增加、查找、删除等(DML)的维护也更加困难。对于数据库中的超大型表,可通过把它的数据分成若干个小表,从而简化数据库的管理活动。对于每一个简化后的小表,我们称为一个单个的分区

    对于分区的访问,我们不需要使用特殊的SQL查询语句或特定的DML语句,而且可以单独的操作单个分区,而不是整个表。同时可以将不同分区的数据放置到不 同的表空间,比如将不同年份的销售数据,存放在不同的表空间,即年的销售数据存放到TBS_2001,2002年的销售数据存放到TBS_2002,依次 类推,从而实现了分散存储,这将大大的简化大容量表的管理,提高查询性能及I/O并发等。

    对于外部应用程序来说,虽然存在不同的分区,且数据位于不同的表空间,但逻辑上仍然是一张表

    可以使用SQL*Loader,IMPDP,EXPDP,Import,Export等工具来装载或卸载分区表中的数据

    关于分区表的功能实际上同SQL server 中的分区表是同样的概念,只不过SQL server中的数据存放到了文件组,相当于Oracle概念中的表空间

    分区信息管控表:DBA_TAB_SUBPARTITIONS

 

2、何时分区

    当表达到GB大小且继续增长

    需要将历史数据和当前的数据分开单独处理,比如历史数据仅仅需要只读,而当前数据则实现DML

 

3、分区的条件及特性

  • 共性:不同的分区之间必须有相同的逻辑属性,比如表名,列名,数据类型,约束等,
  • 个性:各个分区可以有不同的物理属性,比如pctfree, pctused, and tablespaces.
  • 分区独立性:即使某些分区不可用,其他分区仍然可用。
  • 特殊性:含有LONG、LONGRAW数据类型的表不能进行分区

 

4、分区的优点

  • 提高查询性能:只需要搜索特定分区,而非整张表,提高查询速度
  • 节约维护时间:单个分区的数据装载,索引重建,备份,维护等将远小于整张表的维护时间。
  • 节约维护成本:可以单独备份和恢复每个分区
  • 均衡I/O:将不同的分区映射到不同的磁盘以平衡I/O,提高并发

 

5、分区表类型

  • 范围分区表
  • 列表分区表
  • 哈希分区表
  • 组合分区表

 

6、 分区索引类型

  • 全局索引
  • 全局分区索引
  • 本地分区索引

 

7、 分区表建立四种方式语法

(1)、范围分区表

CREATE TABLE range_example
(
   range_key_column   DATE,
   DATA               VARCHAR2 (20),
   ID                 INTEGER
)
PARTITION BY RANGE (range_key_column)
   (PARTITION part01
       VALUES LESS THAN
          (TO_DATE (2008-07-1 00:00:00‘, yyyy-mm-dd hh24:mi:ss))
       TABLESPACE tbs01,
    PARTITION part02
       VALUES LESS THAN
          (TO_DATE (2008-08-1 00:00:00‘, yyyy-mm-dd hh24:mi:ss))
       TABLESPACE tbs02,
    PARTITION part03
       VALUES LESS THAN
          (TO_DATE (2008-09-1 00:00:00‘, yyyy-mm-dd hh24:mi:ss))
       TABLESPACE tbs03);

(2)、列表分区表

CREATE TABLE list_example (dname VARCHAR2 (10), DATA VARCHAR2 (20))
PARTITION BY LIST (dname)
   (PARTITION part01
       VALUES (ME‘, PE‘, QC‘, RD),
    PARTITION part02
       VALUES (SMT‘, SALE‘));

(3)、哈希分区表

CREATE TABLE hash_example
(
   hash_key_column   DATE,
   DATA              VARCHAR2 (20)
)
PARTITION BY HASH (hash_key_cloumn)
   (PARTITION part01, PARTITION part02);

(4)、组合分区表

CREATE TABLE range_hash_example
(
   range_column_key   DATE,
   hash_column_key    INT,
   DATA               VARCHAR2 (20)
)
PARTITION BY RANGE (range_column_key)
   SUBPARTITION BY HASH (hash_column_key)
      SUBPARTITIONS 2
   (PARTITION part_1
       VALUES LESS THAN (TO_DATE (2008-08-01‘, yyyy-mm-dd)) (
       SUBPARTITION part_1_sub_1 ,
       SUBPARTITION part_1_sub_2 ,
       SUBPARTITION part_1_sub_3
    ),
    PARTITION part_2
       VALUES LESS THAN (TO_DATE (2008-09-01‘, yyyy-mm-dd))
    (SUBPARTITION part_2_sub_1 , SUBPARTITION part_2_sub_2 ));

 

8、 分区索引的结构图

bubuko.com,布布扣

注:hash partitioned table 新增partition时,现有表的中所有data都有重新计算hash值,然后重新分配到分区中。所以被重新分配的分区的 indexes需要rebuild 。

 

bubuko.com,布布扣二、案例 - 创建分区表


案例: 创建分区表bxj_emp,以性别区分数据分区方式,将资料分别存放两个男女表空间中

1. 创建两个表空空间

CREATE TABLESPACE bxj_emp_ts1
 LOGGING
 DATAFILE /opt/oracle/oradata/gavinsit/bxj_emp_data01.dbf 
 SIZE 32M 
 AUTOEXTEND ON 
 NEXT 32M MAXSIZE 2048M
 EXTENT MANAGEMENT LOCAL
 
CREATE TABLESPACE bxj_emp_ts2
 LOGGING
 DATAFILE /opt/oracle/oradata/gavinsit/bxj_emp_data02.dbf 
 SIZE 32M 
 AUTOEXTEND ON 
 NEXT 32M MAXSIZE 2048M
 EXTENT MANAGEMENT LOCAL

 

2. 创建分区表,以sex栏位区分

CREATE TABLE bxj_emp_tb
(
   emp_id           NUMBER,
   employeee_name   VARCHAR (50),
   sex              VARCHAR (10),
   salary           NUMBER
)
PARTITION BY LIST (sex)
   (PARTITION bxj_emp_ts1
       VALUES (male),
    PARTITION bxj_emp_ts2
       VALUES (female‘));

 

3. 建立测试资料,男女各一笔

insert into apps.bxj_emp_tb values (1, gavin.bao‘, male‘, 100000);       

insert into apps.bxj_emp_tb values (2, gavin.bao‘, female‘, 200000); 

 

4.  以条件sex = male进行查询时,系统只遍历tablespace 1 male

bubuko.com,布布扣

 

5.  以条件sex = female进行查询时,系统只遍历tablespace 1 female 

bubuko.com,布布扣

 

6.  无分区条件查询,系统需全部遍历tablespace 1 and 2 / male and female

bubuko.com,布布扣

 

 bubuko.com,布布扣三、 案例 - 本地分区索引


1. 创建本地分区索引

CREATE INDEX bxj_emp_tb_localindex ON apps.bxj_emp_tb(sex)
LOCAL
 (
     PARTITION idx_1 TABLESPACE bxj_emp_ts1,
     PARTITION idx_2 TABLESPACE bxj_emp_ts2
  );

2. 解析计划中索引遍历方式

bubuko.com,布布扣

 

bubuko.com,布布扣四、案例 - 全局分区索引


1.  创建全局分区索引

CREATE INDEX bxj_emp_tb_globalindexON bxj_emp_tb (salary)
GLOBAL PARTITION BY RANGE ( salary ) 
( 
  PARTITION idx_1 VALUES LESS THAN (10000)    TABLESPACE bxj_emp_ts1, 
  PARTITION idx_2 VALUES LESS THAN (MAXVALUE) TABLESPACE bxj_emp_ts2 
);

2. 条件为salary <= 100, 索引只遍历tablespace1 

bubuko.com,布布扣

3. 条件为salary >=100000, 索引只遍历tablespace2

bubuko.com,布布扣

 4. 无分区条件时,索引遍历全部

bubuko.com,布布扣

 

bubuko.com,布布扣五、案例 - Oracle Erp交易表mtl_material_transactions的结构


 

select * from dba_tab_subpartitions

where table_name = ‘MTL_MATERIAL_TRANSACTIONS‘

 

 

 ********************作者: 鲍新建********************

bubuko.com,布布扣

 

参考:http://www.linuxidc.com/Linux/2011-08/40763.htm

参考:http://mingyue19850801.blog.163.com/blog/static/19520820201071712231671/

PLSQL_性能优化系列09_Oracle Partition Table大数据分区表

标签:des   style   blog   http   color   io   os   使用   ar   

原文地址:http://www.cnblogs.com/eastsea/p/3981035.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!