关于Oracle 分区实现和操作的几个问题

Posted 2023-04-06

前提：手头上有一个大表，数据量非常大，打算用分区表。查询条件集中在其中两列，一列为ID，一列为时间Time，即每个ID点在不同时间有大量数据插入，形如“select .....from table_name where id=... and time>...and time<... ”的查询语句会经常用到；问题如下：
1.我想用组合分区，请问可以用“范围-范围分区”吗？即大分区用Time范围分区，子分区用ID范围分区。如果可以，用什么语句建分区表，请给出核发代码。如果不可以，请问用什么分区比较好？（为方便维护，大分区必须用时间Time）
2.请问如何查询子分区的数据。
是请给出核心代码，打错字，不好意思。

1. 组合分区表的创建方式（"范围-哈稀"），见附1
2. 楼主的需求，即"范围-范围分区"，在ORACLE 9i, 10g经过测试都是不能实现的
在附1的基础上修改为"范围-范围"组合分区，创建时报错：ORA-14151：无效的表分区方法
3. 关于sxdtgsh兄的回答，我测了
3.1 没有maxvalue上限分区设置，在插入超出分区的数据时会报错ORA-14400: 插入的分区关键字未映射到任何分区
3.2 按回答的语句创建分区表没有问题，但数据无法按照楼主的需求分布
＝＝＝＝附1
附录：创建"范围-哈稀"组合分区表

CREATE TABLE TAB11 (ID NUMBER,DT DATE)
PARTITION BY RANGE (DT)
SUBPARTITION BY HASH (ID) SUBPARTITIONS 2 -- 自分区个数，可以不写，由系统判断
(
PARTITION Y2012 VALUES LESS THAN (TO_DATE('2013-01-01','YYYY-MM-DD'))
(
SUBPARTITION Y2012_H1
,SUBPARTITION Y2012_H2
)
,PARTITION Y2013 VALUES LESS THAN (TO_DATE('2014-01-01','YYYY-MM-DD'))
(
SUBPARTITION Y2013_H1
,SUBPARTITION Y2013_H2
)
,PARTITION YMAX VALUES LESS THAN (MAXVALUE)
(
SUBPARTITION YMAX_H1
,SUBPARTITION YMAX_H2
)
)
＝＝＝＝附2，请楼主检查最后查询的数据分布

create table T_TEST
(
ID NUMBER(20) NOT NULL,
TIME DATE NOT NULL
)
partition by range(TIME, ID) -- 按时间、ID范围分区 这个例子是按年的
(
partition P_2012_10 values less than (to_date('2013-01-01','yyyy-MM-dd'), 10),
partition P_2012_20 values less than (to_date('2013-01-01','yyyy-MM-dd'), 20),
partition P_2012_MAX values less than (to_date('2013-01-01','yyyy-MM-dd'), MAXVALUE),
partition P_2013_10 values less than (to_date('2014-01-01','yyyy-MM-dd'), 10),
partition P_2013_20 values less than (to_date('2014-01-01','yyyy-MM-dd'), 20),
partition P_2013_MAX values less than (to_date('2014-01-01','yyyy-MM-dd'), MAXVALUE),
partition P_MAX values less than (MAXVALUE,MAXVALUE)
);
INSERT INTO T_TEST VALUES (1,TO_DATE('20121204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (12,TO_DATE('20121204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (32,TO_DATE('20121204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (2,TO_DATE('20131204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (12,TO_DATE('20131204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (33,TO_DATE('20131204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (3,TO_DATE('20141204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (23,TO_DATE('20141204 00:00:00','YYYYMMDD HH24:MI:SS'));
INSERT INTO T_TEST VALUES (43,TO_DATE('20151204 00:00:00','YYYYMMDD HH24:MI:SS'));
SELECT * FROM T_TEST;
SELECT * FROM T_TEST PARTITION(P_2012_10);
SELECT * FROM T_TEST PARTITION(P_2012_20);
SELECT * FROM T_TEST PARTITION(P_2012_MAX);
SELECT * FROM T_TEST PARTITION(P_2013_10);
SELECT * FROM T_TEST PARTITION(P_2013_20);
SELECT * FROM T_TEST PARTITION(P_2013_MAX);
SELECT * FROM T_TEST PARTITION(P_MAX); 参考技术A oracle 10g的组合分区只支持 range-list和range-hash。11g好像是可以range-range。如果id不多，可以用range-list。组合分区有时会导致数据字典异常大--数据库存在大量子分区的元数据，能不用就不用。表太大可以考虑分库分表，不是特别大就分区+分区索引。如果只有少数表需要做组合分区，倒可以考虑。
如果查询条件包含分区键，数据库会自动去分区找数据，也可以在查询表名后增加subpartition（）来直接访问子分区数据 参考技术B --你要用time,id范围进行分区，只能用组合范围分区，只有大分区，没有子分区，下面的例子
create table T_TEST
(
ID NUMBER(20) NOT NULL,
TIME DATE NOT NULL
)
partition by range(TIME, ID) -- 按时间、ID范围分区 这个例子是按年的
(
partition P_2012_10 values less than (to_date('2013-01-01','yyyy-MM-dd'), 10),
partition P_2012_20 values less than (to_date('2013-01-01','yyyy-MM-dd'), 20),
partition P_2012_30 values less than (to_date('2013-01-01','yyyy-MM-dd'), 30),
partition P_2013_10 values less than (to_date('2014-01-01','yyyy-MM-dd'), 10),
partition P_2013_20 values less than (to_date('2014-01-01','yyyy-MM-dd'), 20),
partition P_2013_30 values less than (to_date('2014-01-01','yyyy-MM-dd'), 30)
);
--至于查询，如果你知道数据在那个分区里，可以指定分区查询，如果不知道，只要条件里有分区列，oracle会自动优化的。如果没有oralce会扫描全部分区，然后做all操作。

详解ORACLE数据库的分区表

此文从以下几个方面来整理关于分区表的概念及操作:
    1.表空间及分区表的概念
    2.表分区的具体作用
    3.表分区的优缺点
    4.表分区的几种类型及操作方法
    5.对表分区的维护性操作.
    (1.) 表空间及分区表的概念
    表空间：
    是一个或多个数据文件的集合，所有的数据对象都存放在指定的表空间中，但主要存放的是表， 所以称作表空间。
    分区表：
    当表中的数据量不断增大，查询数据的速度就会变慢，应用程序的性能就会下降，这时就应该考虑对表进行分区。表进行分区后，逻辑上表仍然是一张完整的表，只是将表中的数据在物理上存放到多个表空间(物理文件上)，这样查询数据时，不至于每次都扫描整张表。
    ( 2).表分区的具体作用
    Oracle的表分区功能通过改善可管理性、性能和可用性，从而为各式应用程序带来了极大的好处。通常，分区可以使某些查询以及维护操作的性能大大提高。此外,分区还可以极大简化常见的管理任务，分区是构建千兆字节数据系统或超高可用性系统的关键工具。
    分区功能能够将表、索引或索引组织表进一步细分为段，这些数据库对象的段叫做分区。每个分区有自己的名称，还可以选择自己的存储特性。从数据库管理员的角度来看，一个分区后的对象具有多个段，这些段既可进行集体管理，也可单独管理，这就使数据库管理员在管理分区后的对象时有相当大的灵活性。但是，从应用程序的角度来看，分区后的表与非分区表完全相同，使用 SQL DML 命令访问分区后的表时，无需任何修改。
    什么时候使用分区表：
    1、表的大小超过2GB。
    2、表中包含历史数据，新的数据被增加都新的分区中。
    (3).表分区的优缺点
    表分区有以下优点：
    1、改善查询性能：对分区对象的查询可以仅搜索自己关心的分区，提高检索速度。
    2、增强可用性：如果表的某个分区出现故障，表在其他分区的数据仍然可用;
    3、维护方便：如果表的某个分区出现故障，需要修复数据，只修复该分区即可;
    4、均衡I/O：可以把不同的分区映射到磁盘以平衡I/O，改善整个系统性能。
    缺点：
    分区表相关：已经存在的表没有方法可以直接转化为分区表。不过 Oracle 提供了在线重定义表的功能。
    (4).表分区的几种类型及操作方法
    一.范围分区：
    范围分区将数据基于范围映射到每一个分区，这个范围是你在创建分区时指定的分区键决定的。这种分区方式是最为常用的，并且分区键经常采用日期。举个例子：你可能会将销售数据按照月份进行分区。
    当使用范围分区时，请考虑以下几个规则：
    1、每一个分区都必须有一个VALUES LESS THEN子句，它指定了一个不包括在该分区中的上限值。分区键的任何值等于或者大于这个上限值的记录都会被加入到下一个高一些的分区中。
    2、所有分区，除了第一个，都会有一个隐式的下限值，这个值就是此分区的前一个分区的上限值。
    3、在最高的分区中，MAXVALUE被定义。MAXVALUE代表了一个不确定的值。这个值高于其它分区中的任何分区键的值，也可以理解为高于任何分区中指定的VALUE LESS THEN的值，同时包括空值。

 例一：
    假设有一个CUSTOMER表，表中有数据200000行，我们将此表通过CUSTOMER_ID进行分区，每个分区存储100000行，我们将每个分区保存到单独的表空间中，这样数据文件就可以跨越多个物理磁盘。下面是创建表和分区的代码，如下：
    CREATE TABLE CUSTOMER
    (
    CUSTOMER_ID NUMBER NOT NULL PRIMARY KEY,
    FIRST_NAME VARCHAR2(30) NOT NULL,
    LAST_NAME VARCHAR2(30) NOT NULL,
    PHONE VARCHAR2(15) NOT NULL,
    EMAIL VARCHAR2(80),
    STATUS CHAR(1)
    )
    PARTITION BY RANGE (CUSTOMER_ID)
    (
    PARTITION CUS_PART1 VALUES LESS THAN (100000) TABLESPACE CUS_TS01,
    PARTITION CUS_PART2 VALUES LESS THAN (200000) TABLESPACE CUS_TS02
    )
    例二：按时间划分
    CREATE TABLE ORDER_ACTIVITIES
    (
    ORDER_ID NUMBER(7) NOT NULL,
    ORDER_DATE DATE,
    TOTAL_AMOUNT NUMBER,
    CUSTOTMER_ID NUMBER(7),
    PAID CHAR(1)
    )
    PARTITION BY RANGE (ORDER_DATE)
    (
    PARTITION ORD_ACT_PART01 VALUES LESS THAN (TO_DATE(‘01- MAY -2003‘,‘DD-MON-YYYY‘)) TABLESPACEORD_TS01,
    PARTITION ORD_ACT_PART02 VALUES LESS THAN (TO_DATE(‘01-JUN-2003‘,‘DD-MON-YYYY‘)) TABLESPACE ORD_TS02,
    PARTITION ORD_ACT_PART02 VALUES LESS THAN (TO_DATE(‘01-JUL-2003‘,‘DD-MON-YYYY‘)) TABLESPACE ORD_TS03
    )
    例三：MAXVALUE
    CREATE TABLE RangeTable
    (
    idd INT PRIMARY KEY ,
    iNAME VARCHAR(10),
    grade INT
    )
    PARTITION BY RANGE (grade)
    (
    PARTITION part1 VALUES LESS THEN (1000) TABLESPACE Part1_tb,
    PARTITION part2 VALUES LESS THEN (MAXVALUE) TABLESPACE Part2_tb
    );
    二.列表分区：
    该分区的特点是某列的值只有几个，基于这样的特点我们可以采用列表分区。
    例一
    CREATE TABLE PROBLEM_TICKETS
    (
    PROBLEM_ID NUMBER(7) NOT NULL PRIMARY KEY,
    DESCRIPTION VARCHAR2(2000),
    CUSTOMER_ID NUMBER(7) NOT NULL,
    DATE_ENTERED DATE NOT NULL,
    STATUS VARCHAR2(20)
    )
    PARTITION BY LIST (STATUS)
    (
    PARTITION PROB_ACTIVE VALUES (‘ACTIVE‘) TABLESPACE PROB_TS01,
    PARTITION PROB_INACTIVE VALUES (‘INACTIVE‘) TABLESPACE PROB_TS02
    例二
    CREATE TABLE ListTable
    (
    id INT PRIMARY KEY ,
    name VARCHAR (20),
    area VARCHAR (10)
    )
    PARTITION BY LIST (area)
    (
    PARTITION part1 VALUES (‘guangdong‘,‘beijing‘) TABLESPACE Part1_tb,
    PARTITION part2 VALUES (‘shanghai‘,‘nanjing‘) TABLESPACE Part2_tb
    );
    )
    三.散列分区：
    这类分区是在列值上使用散列算法，以确定将行放入哪个分区中。当列的值没有合适的条件时，建议使用散列分区。
    散列分区为通过指定分区编号来均匀分布数据的一种分区类型，因为通过在I/O设备上进行散列分区，使得这些分区大小一致。
    例一：
    CREATE TABLE HASH_TABLE
    (
    COL NUMBER(8),
    INF VARCHAR2(100)
    )
    PARTITION BY HASH (COL)
    (
    PARTITION PART01 TABLESPACE HASH_TS01,
    PARTITION PART02 TABLESPACE HASH_TS02,
    PARTITION PART03 TABLESPACE HASH_TS03
    )
    简写：
    CREATE TABLE emp
    (
    empno NUMBER (4),
    ename VARCHAR2 (30),
    sal NUMBER
    )
    PARTITION BY HASH (empno) PARTITIONS 8
    STORE IN (emp1,emp2,emp3,emp4,emp5,emp6,emp7,emp8);
    hash分区最主要的机制是根据hash算法来计算具体某条纪录应该插入到哪个分区中,hash算法中最重要的是hash函数，Oracle中如果你要使用hash分区，只需指定分区的数量即可。建议分区的数量采用2的n次方，这样可以使得各个分区间数据分布更加均匀。

 四.组合范围散列分区
    这种分区是基于范围分区和列表分区，表首先按某列进行范围分区，然后再按某列进行列表分区，分区之中的分区被称为子分区。
    CREATE TABLE SALES
    (
    PRODUCT_ID VARCHAR2(5),
    SALES_DATE DATE,
    SALES_COST NUMBER(10),
    STATUS VARCHAR2(20)
    )
    PARTITION BY RANGE(SALES_DATE) SUBPARTITION BY LIST (STATUS)
    (
    PARTITION P1 VALUES LESS THAN(TO_DATE(‘2003-01-01‘,‘YYYY-MM-DD‘))TABLESPACE rptfact2009
    (
    SUBPARTITION P1SUB1 VALUES (‘ACTIVE‘) TABLESPACE rptfact2009,
    SUBPARTITION P1SUB2 VALUES (‘INACTIVE‘) TABLESPACE rptfact2009
    ),
    PARTITION P2 VALUES LESS THAN (TO_DATE(‘2003-03-01‘,‘YYYY-MM-DD‘)) TABLESPACE rptfact2009
    (
    SUBPARTITION P2SUB1 VALUES (‘ACTIVE‘) TABLESPACE rptfact2009,
    SUBPARTITION P2SUB2 VALUES (‘INACTIVE‘) TABLESPACE rptfact2009
    )
    )
    五.复合范围散列分区：
    这种分区是基于范围分区和散列分区，表首先按某列进行范围分区，然后再按某列进行散列分区。
    create table dinya_test
    (
    transaction_id number primary key,
    item_id number(8) not null,
    item_description varchar2(300),
    transaction_date date
    )
    partition by range(transaction_date)subpartition by hash(transaction_id) subpartitions 3 store in (dinya_space01,dinya_space02,dinya_space03)
    (
    partition part_01 values less than(to_date(‘2006-01-01’,’yyyy-mm-dd’)),
    partition part_02 values less than(to_date(‘2010-01-01’,’yyyy-mm-dd’)),
    partition part_03 values less than(maxvalue)
    );
    (5).有关表分区的一些维护性操作：
    一、添加分区
    以下代码给SALES表添加了一个P3分区
    ALTER TABLE SALES ADD PARTITION P3 VALUES LESS THAN(TO_DATE(‘2003-06-01‘,‘YYYY-MM-DD‘));
    注意：以上添加的分区界限应该高于最后一个分区界限。
    以下代码给SALES表的P3分区添加了一个P3SUB1子分区
    ALTER TABLE SALES MODIFY PARTITION P3 ADD SUBPARTITION P3SUB1 VALUES(‘COMPLETE‘);
    二、删除分区
    以下代码删除了P3表分区：
    ALTER TABLE SALES DROP PARTITION P3;
    在以下代码删除了P4SUB1子分区：
    ALTER TABLE SALES DROP SUBPARTITION P4SUB1;
    注意：如果删除的分区是表中唯一的分区，那么此分区将不能被删除，要想删除此分区，必须删除表。
    三、截断分区
    截断某个分区是指删除某个分区中的数据，并不会删除分区，也不会删除其它分区中的数据。当表中即使只有一个分区时，也可以截断该分区。通过以下代码截断分区：
    ALTER TABLE SALES TRUNCATE PARTITION P2;
    通过以下代码截断子分区：
    ALTER TABLE SALES TRUNCATE SUBPARTITION P2SUB2;
    四、合并分区
    合并分区是将相邻的分区合并成一个分区，结果分区将采用较高分区的界限，值得注意的是，不能将分区合并到界限较低的分区。以下代码实现了P1 P2分区的合并：
    ALTER TABLE SALES MERGE PARTITIONS P1,P2 INTO PARTITION P2;