- 浏览: 860427 次
- 性别:
- 来自: 北京
-
文章分类
- 全部博客 (1095)
- 大数据存储 (76)
- 编程语言(Java&Scala) (46)
- 大数据建模 (33)
- 开发与管理 (8)
- 操作系统 (13)
- 实用代码集合 (25)
- 新技术研究 (15)
- 前端技术研究 (22)
- 物联网 (18)
- 兴趣探索 (15)
- 编程语言(Groovy&Grails) (92)
- 编程语言(RubyOnRails) (153)
- 个人收藏 (152)
- 技术管理 (12)
- 编程语言(Flex) (8)
- 架构和框架(GWT) (4)
- 数学和算法 (6)
- 人工智能(TensorFlow) (11)
- 编程语言(Python) (6)
- 移动开发 (4)
- 软件工程实践 (54)
- 个人感悟 (6)
- 职场感悟 (5)
- 行业经验 (23)
- 产品和运营 (10)
- 生活与随想 (155)
- 简单生活 (70)
- 天空的云 (53)
- 秋月春风 (14)
- 东逝水 (59)
- 浪花淘 (35)
- 白发渔樵 (4)
最新评论
-
cljhyjs:
今天看看在研究,已经安装好了,请问怎么一步一步使用呢?
Thingsboard -
yx200404:
说一下十维空间 -
Clear_Love:
设置了也报错
Xcode 7遇到 App Transport Security has blocked a cleartext HTTP 错误 -
wang263574375:
我想问的是,如果防火墙的设置不能改变,那么要怎么处理呢?
ORA-12571:TNS包写入程序失败 -
ralflsb:
SmartSVN 8.6
SmartSVN破解包
行迁移(row migration):由于在table的pctfree设置过小,在update这个table并使其行长增大的时候,就有可能因为块的剩余空间不够存储该行,oracle会把该行数据迁移到另外一个有足够空闲空间的block中,此即发生了行迁移;发生行迁移时,行rowid并不变,原先存储该行的地方增加了一个新的指针,该指针指向迁移后的block id,所以我们在访问发生了行迁移的行时,会要读取迁移前和迁移后的2个block,一个表如果有大量的行发生了row migration,那么就有必要查看该table的storage设置了,看看pctpree是否可以调整的更大一点。
链接(row chained):和行迁移相对应的是行链接row chained,行连接常发生在行很大的情况下,如有long,raw,lob列,当insert一条新的记录时,一个block空间不够容纳一条记录,oracle会链接若干个block用来存储此记录,此即称为行链接;行链接是应为行的长度太长,要想避免,只能增加爱block size,在oracle9i之前,创建好数据库后您无法修改block size,要求你在建库的时候就要规划好,在oracle9i,提供了多块大小的技术,您可以设置2k,4k,8k,16k,32k大小的block,若想使用,您还必须设置相应的db_nk_cache_size缓冲池的大小。
下面是应用中客户维表行迁移的检测和消除步骤
检查user_tables信息
利用oracle自带的脚本utlchain.sq,新增表chained_rows,用于存储发生行迁移记录信息
Table created.
用analyze命令分析该表
Chained_rows用于存放产生行迁移的记录信息,其中head_rowid表示产生行迁移记录的rowid;
从该表中任意找一个head_rowed,看看行迁移消除前的执行计划
可以看到,取一条记录需要2个consistent read ;
接下来,来消除该表上的行迁移
修改表的pct_free,增大为25,日后需再观察,是否有大量的行迁移情况,如有,则说明还需要调整该参数。
建立临时表,存放发生行迁移的记录
查看是否有外键约束应用于此表上,如果有。则先禁用此约束,操作结束后再启用
SQL>
未选定行
如有相关表建有外键指向该表,需要先禁用约束
删除发生行迁移的记录
从临时表中重新插入记录
看看执行行迁移消除后的执行计划
可以发现,执行行迁移消除后,consistent gets为1个block了。
最后,drop临时表
注:行迁移主要是由于update的时候,块剩余空间满足不了而导致的,对于行迁移的消除,除了上面介绍的方法外,采用exp/imp ,先把表导出,然后再导入,或者采用move命令,同样,可以达到行迁移消除的目的。
链接(row chained):和行迁移相对应的是行链接row chained,行连接常发生在行很大的情况下,如有long,raw,lob列,当insert一条新的记录时,一个block空间不够容纳一条记录,oracle会链接若干个block用来存储此记录,此即称为行链接;行链接是应为行的长度太长,要想避免,只能增加爱block size,在oracle9i之前,创建好数据库后您无法修改block size,要求你在建库的时候就要规划好,在oracle9i,提供了多块大小的技术,您可以设置2k,4k,8k,16k,32k大小的block,若想使用,您还必须设置相应的db_nk_cache_size缓冲池的大小。
下面是应用中客户维表行迁移的检测和消除步骤
检查user_tables信息
Select table_name,pct_free,num_rows,blocks,chain_cnt From user_tables Where table_name='CUST_DIMT0'; TABLE_NAME PCT_FREE NUM_ROWS BLOCKS CHAIN_CNT ------------------------------ ---------- ---------- ---------- ---------- CUST_DIMT0 20 363338 8846 7449
利用oracle自带的脚本utlchain.sq,新增表chained_rows,用于存储发生行迁移记录信息
SQL> @ $ORACLE_HOME/rdbms/admin/utlchain.sql
Table created.
SQL> grant all on chained_rows to dwh; Grant succeeded.
用analyze命令分析该表
SQL> analyze table cust_dimt0 list chained rows into sys.chained_rows; Table analyzed
Chained_rows用于存放产生行迁移的记录信息,其中head_rowid表示产生行迁移记录的rowid;
从该表中任意找一个head_rowed,看看行迁移消除前的执行计划
SQL> set autotrace traceonly; SQL> select * from cust_dimt0 where rowid='AAAF9UAARAAAAWGAA3'; Execution Plan ---------------------------------------------------------- 0 SELECT STATEMENT ptimizer=CHOOSE (Cost=1 Card=1 Bytes=172) 1 0 TABLE ACCESS (BY USER ROWID) OF 'CUST_DIMT0' (Cost=1 Card=1 Bytes=172) Statistics ---------------------------------------------------------- 0 recursive calls 0 db block gets 2 consistent gets 0 physical reads 0 redo size 1467 bytes sent via SQL*Net to client 275 bytes received via SQL*Net from client 2 SQL*Net roundtrips to/from client
可以看到,取一条记录需要2个consistent read ;
接下来,来消除该表上的行迁移
修改表的pct_free,增大为25,日后需再观察,是否有大量的行迁移情况,如有,则说明还需要调整该参数。
SQL> alter table cust_dimt0 pctfree 25;
建立临时表,存放发生行迁移的记录
CREATE TABLE CUST_DIMT0_080331 AS SELECT * FROM CUST_DIMT0 WHERE ROWID IN (SELECT HEAD_ROWID FROM SYS.CHAINED_ROWS WHERE TABLE_NAME='CUST_DIMT0');
查看是否有外键约束应用于此表上,如果有。则先禁用此约束,操作结束后再启用
SQL> select constraint_name,constraint_type,r_owner,r_constraint_name from dba_constraints where table_name='CUST_DIMT0' and wner='DWH'; CONSTRAINT_NAME CONSTRAINT_TYPE R_OWNER R_CONSTRAINT_NAME ------------------------------ --------------- ------------------------------ ------------------------------ CUST_DIMT0_PK P SYS_C006476 C SYS_C006477 C SYS_C006478 C SYS_C006479 C
SQL>
SELECT * FROM DBA_CONSTRAINTS WHERE R_CONSTRAINT_NAME='CUST_DIMT0_PK';
未选定行
如有相关表建有外键指向该表,需要先禁用约束
alter table xxx disable constraint yyyy
删除发生行迁移的记录
SQL> DELETE CUST_DIMT0 WHERE ROWID IN (SELECT HEAD_ROWID FROM SYS.CHAINED_ROWS WHERE TABLE_NAME='CUST_DIMT0');
从临时表中重新插入记录
SQL> INSERT INTO CUST_DIMT0 SELECT * FROM CUST_DIMT0_080331;
看看执行行迁移消除后的执行计划
SQL> select * from cust_dimt0 where rowid='AAAF9UAARAAAAWGAA3'; 未选定行 Execution Plan ---------------------------------------------------------- 0 SELECT STATEMENT ptimizer=CHOOSE (Cost=1 Card=1 Bytes=172) 1 0 TABLE ACCESS (BY USER ROWID) OF 'CUST_DIMT0' (Cost=1 Card=1 Bytes=172) Statistics ---------------------------------------------------------- 0 recursive calls 0 db block gets 1 consistent gets 0 physical reads 0 redo size 1222 bytes sent via SQL*Net to client 234 bytes received via SQL*Net from client 1 SQL*Net roundtrips to/from client 0 sorts (memory) 0 sorts (disk) 0 rows processed
可以发现,执行行迁移消除后,consistent gets为1个block了。
最后,drop临时表
SQL> drop table CUST_DIMT0_080331; Table dropped
注:行迁移主要是由于update的时候,块剩余空间满足不了而导致的,对于行迁移的消除,除了上面介绍的方法外,采用exp/imp ,先把表导出,然后再导入,或者采用move命令,同样,可以达到行迁移消除的目的。
发表评论
-
期货交易的秘密
2022-09-28 12:31 20期货交易盈利的逻辑,简单来说就是4个字:大赚小亏。 赚钱的时 ... -
一个未了的心结
2022-09-27 14:16 87我有一个未了的心结, 就是攻克癌症, 我后面不管做啥, 挣了钱 ... -
生是一场自我实现的预言
2022-03-15 15:21 0术力之限要靠道力突破, 道力之限要靠心力突破, 人生是一场自我 ... -
人生是一场自我实现的预言
2022-03-15 14:25 388术力之限要靠道力突破, 道力之限要靠心力突破, 人生是一场自我 ... -
物联网大数据平台
2021-01-28 15:29 278TDengine是专为物联网、车联网、工业互联网、IT运维等设 ... -
大数据平台CDH搭建指南
2021-01-28 15:26 244CDH和CM介绍及搭建 http://www.fblinux. ... -
使用Flume+Logstash+Kafka+Spark Streaming进行实时日志处理分析【公安大数据】
2018-09-20 16:53 1109使用Flume+Logstash+Kafka+Spark St ... -
Cloudera Hadoop运维管理与性能调优
2018-09-17 18:53 610Cloudera Hadoop运维管理与性能调优 -
CIO
2018-08-30 11:34 312一个企业的运营过程,不论其身处哪个行业,其实都是一个信 ... -
Hadoop与MPP是什么关系?有什么区别和联系?
2018-08-29 11:17 1562Hadoop与MPP是什么关系?有什么区别和联系? -
大数据资料
2018-05-25 09:44 220大数据资料 -
大数据相关的一些内容和知识
2018-04-22 20:38 322一、大数据通用处理平 ... -
难念的经
2018-03-27 12:13 347“笑你我枉花光心计 爱 ... -
办公室里面小屁就没有掌握自己命运的资格
2018-02-07 10:03 405办公室里面小屁就没有掌握自己命运的资格。 -
一个成熟的自动化运维系统具备什么功能?
2018-02-05 16:57 302一个成熟的自动化运维系统具备什么功能? -
我国“十三五”国家大数据战略离不开专业的数据中心基础设施运维服务
2017-11-21 15:35 411我国“十三五”国家大数据战略离不开专业的数据中心基础设施运维服 ... -
千万级记录的Discuz论坛导致MySQL CPU 100%的优化笔记
2016-07-08 12:15 771千万级记录的Discuz论坛导致MySQL CPU 100%的 ... -
Oralce表被锁了,咋办?
2015-11-02 10:27 6121.下面的语句用来查询哪些对象被锁: select objec ... -
id oracle
2013-11-21 13:14 659SQL> startup ORA-27125: una ... -
一个sql简单关于分组的sql
2013-05-14 16:36 738select * from ( select aa.pe ...
相关推荐
云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf云迁移解决方案.pdf
本文将迁移学习与计算机视觉中...现有的迁移学习方法来辅助解决目标识别问题,而是立足于迁移学习的基本思想, 研究如何在目标识别这一具体任务中实现跨领域的知识迁移,并在此基础上,提 出面向目标识别的迁移方法。
当一条记录被更新的时候,数据库引擎首先会尝试在它保存的数据块中寻找足够的空闲空间,如果没有足够的空闲空间可用,这条记录将被...第二部分包含所有的具体数据,将保存到另外一个新的数据块中,这个就成了行迁移。
在实际的工作中我们经常会碰到一些Oracle数据库性能较低的问题,当然,引起 Oracle数据库性能较低的原因是多方面的,我们能够通过一些正确的设计和诊断来尽量的避免一些Oracle数据库性能不好,Row Migration (行迁移) ...
本文提出了一种基于GoogLeNet深度迁移学习的苹果缺陷检测方法,以解决当前苹果分选中人工操作的现状。该方法使用GoogLeNet深度迁移模型对苹果缺陷进行检测,并与浅层卷积神经网络(AlexNet和改进型LeNet5)及传统...
AWS CloudEndure 是一款云迁移解决方案,旨在帮助企业快速、安全地将应用程序和数据迁移到 AWS 云端。该解决方案提供了一整套的云迁移服务,包括评估、规划、迁移和优化等阶段。 知识点一:CloudEndure Migration ...
图像处理源码-基于迁移学习实现X 光检测新冠肺炎
本文档详细描述了Oracle数据库中行迁移、行链接的问题:包括概念、原理、产生原因、以及解决方案。
SecureFX弹出迁移向导问题解决方案,之前自己在网上找了很久都没解决,现在给大家分享下
VMware Converter Standalone 6.1.1 P2V迁移Linux一例
oracle_行链接和行迁移,详细介绍了oracle的行链接和行迁移。
基于脑电信号深度迁移学习的驾驶疲劳检测是近年来研究的热点之一,由于脑电信号具有非线性、非平稳性和空间分辨率低等特点,传统的机器学习方法在运用脑电信号进行疲劳检测时还存在识别率低,特征提取操作繁琐等不足...
去年年底做了不少系统的数据迁移,大部分系统由于平台和版本的原因,做的是逻辑迁移,少部分做的是物理迁移,有一些心得体会,与大家分享。 首先说说迁移流程,在迁移之前,写好方案,特别是实施的方案步骤一定...
采用 CNN-LSTM 与迁移学习的虚假评论检测 基于 titre、描述、标签和部分内容,我们可以总结出以下知识点: 一、虚假评论检测的重要性 * 虚假评论检测具有重要的社会意义和经济价值 * 虚假评论可能误导消费者的...
计算机视觉和自然语言处理中的问题通常需要大量的数据和计算资源来训练一个有意义的深度学习模型,而迁移学习可以减少对大量训练数据和训练时间的要求,因此在视觉和文本领域中非常重要,还可以使用迁移学习来解决医疗...
PC平台应用系统向Android平台迁移探究——以医疗检测欺诈系统为例.pdf
如果你的Oracle数据库性能低下,行链接和行迁移可能是其中的原因之一。我们能够通过合理的设计或调整数据库来阻止这个现象。行链接和行迁移是能够被避免的两个潜在性问题。我们可以通过合理的调整来提高数据库性能。...
针对上述问题,研究了一种基于迁移技术和D-S证据理论的网络异常检测方法。首先用迁移学习方法对已知网络攻击进行建模,此模型在构建时考虑了不同分布的异常攻击间的差异;然后用其训练得到的分类器对未知的网络行为...
解决sqlserver数据库迁移后用户映射不上的问题
数据迁移解决方案.docx