`
nlslzf
  • 浏览: 1026411 次
  • 性别: Icon_minigender_1
  • 来自: 北京
社区版块
存档分类
最新评论

oracle大表分区的一点点心得

阅读更多
http://www.knowsky.com/388420.html

最近在做一个客户关系治理系统,项目做的到不是非常成功,可还是学到了不少的知识,由于数据量很大,没有专门的Oracle数据库人员支持,对数据库优化治理等也只有我这个约懂一点的人上了。在对数据库优化上有一点点心得写出来希望能同大家一起学习和交流。

数据库大表的优化:采用蔟表(clustered tables)及蔟索引(Clustered Index)
蔟表和蔟索引是oracle所提供的一种技术,其基本思想是将几张具有相同数据项、并且经常性一起使用的表通过共享数据块(data block)的模式存放在一起。各表间的共同字段作为蔟键值(cluster key),数据库在访问数据时,首先找到蔟键值,以此同时获得若干张表的相关数据。蔟表所能带来的好处是可以减少I/O和减少存储空间,其中我更看重前者。采用表分区(partition)
表分区技术是在超大型数据库(VLDB)中将大表及其索引通过分区(patition)的形式分割为若干较小、可治理的小块,并且每一分区可进一步划分为更小的子分区(sub partition)。而这种分区对于应用来说是透明的。通过对表进行分区,可以获得以下的好处:
1)减少数据损坏的可能性。
2)各分区可以独立备份和恢复,增强了数据库的可治理性。
3)可以控制分区在硬盘上的分布,以均衡IO,改善了数据库的性能。
蔟表与表分区技术的侧重点各有不同,前者侧重于改进关联表间查询的效率,而表分区侧重于大表的可治理性及局部查询的性能。而这两项对于我的系统来说都是极为重要。由于本人技术限制,目前尚不确定两者是否可以同时实现,有那位在这方面有经验的给点指导将不胜感激。 
在两者无法同时实现的情况下,应依照需实现的功能有所取舍。综合两种模式的优缺点,我认为采用表分区技术较为适用于我们的应用。
Oracle的表分区有以下几种类型:
1)范围分区:将表按某一字段或若干个字段的取值范围分区。
2)hash分区:将表按某一字段的值均匀地分布到若干个指定的分区。
3)复合分区:结合了前面两种分区类型的优点,首先通过值范围将表进行分区,然后以hash模式将数据进一步均匀分配至物理存储位置。
综合考虑各项因素,以第三种类型最为优越。(本人实在技术有限仅采用了第1种范围分区,因为比较简单,便于治理)
优化的具体步骤:
1.确定需要优化分区的表:
经过对系统数据库表结构和字段,应用程序的分析,现在确定那些大表需要进行分区:
如帐户交易明细表acct_detail.
2.确定表分区的方法和分区键:
分区类型:采用范围分区。
分 区 键:
按trans_date(交易时间)字段进行范围分区.
3.确定分区键的分区范围,及打算分多少分区:
如:帐户交易明细表acct_detail.
根据字段(trans_date)分成一下分区:
1).分区1:09/01/2003   
2).分区2:10/01/2003   
3).分区3:11/01/2003   
4).分区4:12/01/2003   
5).分区5:01/01/2004 
6).分区6:02/01/2004 
   该表明显需要在以后增加分区。
4.建立分区表空间和分区索引空间
  1).建立表的各个分区的表空间: 
   1.分区1:crm_detail_200309
   CREATE TABLESPACE crm_detail_200309  DATAFILE  
   ‘/u1/oradata/orcl/crm_detail_20030901.dbf’ 
   SIZE 2000M EXTENT MANAGEMENT LOCAL UNIFORM size 16M;
   其它月份以后同以上(我在此采用oracle的表空间本地治理的方法)。

  2). 建立分区索引表空间
   1.分区1:index_detail_200309
   CREATE TABLESPACE index_detail_200309  DATAFILE  
   ‘/u3/oradata/orcl/index_detail_20030901.dbf’ 
   SIZE 2000M  EXTENT MANAGEMENT LOCAL UNIFORM size 16M;
5.建立基于分区的表:
   create  table  table name
   (

    ........
    )
    enable row movment               --此语句是能修改行分区键值,也就是如不添加该                                     句不能修改记录的分区键值,不能使记录分区迁移
    PARTITION   BY   RANGE  (TRANS_DATE)
    (
       PARTITION     crm_detail_200309  VALUES  LESS THAN 
(TO_DATE (‘09/01/2003’,’mm/dd/yyyy’ ) )
TABLESPACE   crm_detail_200309,
       其他分区.....
     );
6.建立基于分区的索引:
  create  index   index_name  on table_name (分区键+…)
   global                                  --这里是全局分区索引,也可以建本地索引
   PARTITION   BY   RANGE  (TRANS_DATE)
   (
     PARTITION     index_detail_200309  VALUES  LESS THAN 
     (TO_DATE ('09/01/2003','mm/dd/yyyy' )) 
     TABLESPACE   index_detail_200309,
     其他索引分区...
    );
   
对表的分区就这样完成了,第一次主要确定表分区的分区策约是最重要的,可我觉得对表分区难在以后对表分区的治理上面,因为随着数据量的增加,表分区必然存在删除,扩容,增加等。在这些过程中还牵涉到全局等索引,因为对分区表进行ddl操作为破坏全局索引,故全局索引必须在ddl后要重rebuild.

以上写的很乱也很差,希望大家多多谅解和指点。
分享到:
评论

相关推荐

    ORACLE大表分区

    -- 手动运行示例: 自动对800M以上的非分区大表PM_RAW_B_RESTEST进行分区,一天一分区; -- 手动运行示例: SQL> EXEC AGGRE_PM_PARTITIONF('PM_RAW_B_RESTEST',800,1,10,3600,'SUN','DCTIME','0','FALSE','FALSE','...

    oracle分区表之hash分区表的使用及扩展

    Hash分区是Oracle实现表分区的三种基本分区方式之一。对于那些无法有效划分分区范围的大表,或者出于某些特殊考虑的设计,需要使用Hash分区,下面介绍使用方法

    Oracle大表分区的技术

    Oracle大表分区的技术,网上找的,比较详细,收藏中

    oracle表分区详解

    oracle表分区详解

    Oracle分区表详解

    Oracle分区表详解 大家可以参考下 网上找的资料共享一下

    ORACLE分区ORACLE分区ORACLE分区

    ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区ORACLE分区

    oracle普通表转化为分区表的方法

    主要介绍了oracle普通表转化为分区表的方法,官方给出了四种操作方法,本文主要对第四种方法进行详细分析,需要的朋友可以参考下。

    oracle分区表总结

    oracle分区表总结oracle分区表总结oracle分oracle分区表总结区表总结oracle分区表总结

    Oracle表分区详解(优缺点)

    Oracle 表分区技术详解: 1.表空间及分区表的概念 2.表分区的具体作用 3.表分区的优缺点 4.表分区的几种类型及操作方法 5.对表分区的维护性操作.

    oracle数据库表分区实例

    oracle 数据库的表分区操作实例,适合学习操作对表进行分区。

    Oracle数据库表分区

    Oracle提供了对表和索引进行分区的技术,以改善大型应用系统的性能

    oracle 分区表管理

    oracle 分区表管理oracle 分区表管理oracle 分区表管理oracle 分区表管理oracle 分区表管理

    oracle资源表分区

    oracle资源分区表oracle资源分区表oracle资源分区表oracle资源分区表

    Oracle 分区表 分区索引 索引分区详解

    虽然存储介质和数据处理技术的发展也很快,但是仍然不能满足用户的需求,为了使用户的大量的数据在读写操作和查询中速度更快,Oracle提供了对表和索引进行分区的技术,以改善大型应用系统的性能。

    ORACLE表分区分区概述

    ORACLE表分区分区概述 ...分区将表分离在若于不同的表空间上,用分而治之的方法来支撑元限膨胀的大表,组大表在物理一级的可管理性.将大表分割成较小的分区可以改善表的维护、备份、恢复、事务及查询性能

    ORACLE表自动按月分区步骤

    分享一个自己学习和实践的关于Oracle表自动按月分区知识点,已经在项目上线并且有效的方案。

    oracle表分区实例

    oracle表分区实例.doc oracle表分区实例.doc oracle表分区实例.doc

    Oracle表分区 建表空间 创建用户

    Oracle的相关知识,建表空间,创建用户,给用户授权, 删除用户,给表多列加锁,导出和导入,范围分区,散列分区,列表分区,复合分区、、、

    oracle分区表分区索引.docx

    对于oracle分区表分区索引的详细说明。 详细描述了分区表的类型,分区索引的类型 分类 。 删除或truncate 表分区时,什么样的情况索引会失效 需要重建 ,什么时候 对索引 没影响 。

    oracle10g分区表自动按时间创建删除分区存储过程

    文件是本人oracle10g分区表自动按时间创建、删除分区的存储过程,测试代码,通过job调用存储过程,每天午夜12点运行一次。妥妥!跟大家分享下!

Global site tag (gtag.js) - Google Analytics