百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 优雅编程 > 正文

oracle-高水位(oracle高水位问题怎么解决)

sinye56 2024-10-09 19:48 8 浏览 0 评论

高水位线

(HWM)是数据块未格式化且从未使用过的段中的分界点,也可以想象为一个水库的历史最高水位。

MSSM使用free lists来管理段空间。创建表格时,段中的任何块都不会格式化。当会话首次向表中插入行时,数据库会在可用列表中搜索可用块。如果数据库找不到可用的块,则会预生成一组块,将它们放在空闲列表中,并开始向块中插入数据。在MSSM中,全表扫描读取HWM下的所有块。

ASSM不使用free lists,因此必须以不同的方式管理空间。当会话首次将数据插入表中时,数据库将格式化单个位图块,而不是像MSSM中那样预先格式化一组块。位图跟踪段中块的状态,代替free lists。数据库使用位图查找空闲块,然后在用数据填充每个块之前对其进行格式化。ASSM在块之间展开插入以避免并发问题。

ASSM段中的每个数据块都处于以下状态之一:
HWM上方:
1、这些块未格式化,从未使用过。
HWM下方这些块处于以下状态之一:
1、已分配,但当前未格式化且未使用
2、格式化并包含数据
3、已格式化且为空,因为数据已删除

将ASSM段描述为一系列水平块。如下图,创建一个空表格时,HWM位于左侧段的开头。由于尚未插入任何数据,因此段中的所有块都未格式化且从未使用过。

假设事务将行插入到段中。数据库必须分配一组块来保存行。分配的块低于HWM。数据库格式化此组中的位图块以保存元数据,但不预处理组中的其余块。

如下图,在HWM以下的块是已分配的块,在HWM以上的是未分配的块。当数据写入发生时那么low hwm对应的分界点左侧就是实际存在数据或者被格式化的块。

数据库在HWM和低HWM之间选择一个块,并对其进行写入。数据库可以很容易地在HWM和低HWM之间选择任何其他块,或者在低HWM下选择任何具有可用空间的块。

当low hwm和hwm之间没有空余块可用的时候,数据块会移动hwm并分配一组没有格式化的块。原来的low hwm会移动到之前的hwm,新的hwm会移动到新的位置。


总结来说:

在MSSM表空间中每个段只有一个HWM,在ASSM表空间中,除了HWM外,还有一个低HWM。

在MSSM中,当HWM向前推进时,HWM之下的所有块都会被格式化并立即有效,Oracle可以安全地读取这块。

而对于ASSM,HWM推进时,Oracle并不会立即格式化所有块,而是在第一次真正使用这些块时才会完成格式化,以便安全地读取(这里的“安全”意思就是判断是否格式化)。第一次使用会发生在数据库向给定块插入记录时。

对于ASSM,数据会被插入到位于低HWM和HWM之间的任意块中,而在这个区域中的许多块可能没有被格式化。新数据要插入,但是通过bitmap确认到HWM下空间不足,则HWM会向右推进,分配一组未被格式化的块。HWM向右推进后,low HWM向右移动到老HWM的位置。 注意:官方文档上额外说到,如果在 low HWM之下有空余空间的任何块,也会被插入。

HWM以上的都是未分配、未格式化,HWM以下的都是被分配了的,有的格式化,有的没有

low HWM以下的都是格式化了的。

全表扫描和HWM的关系

当Oracle全表扫描至HWM后,会对低HWM以下的所有块直接读取并加以处理。而对介于低HWM和HWM之间的块,需要参考管理这些块所用的ASSM位图信息以便查看应该读取哪些块,以及哪些块应该被忽略。

如何查看表的高水位实验

LUQX@oradb>select round((1-a.used/b.num_total)*100,0) percent from
(SELECT COUNT (DISTINCT SUBSTR(rowid,1,15)) Used FROM LUQX.TEST1) a,
(select blocks num_total from dba_tables where table_name='TEST1' and owner='LUQX') b;  2    3  

   PERCENT
----------
	 3     高水位下的空闲块为3%   如果超过20-30%建议关注。说明表碎片比较严重。

查看某个表实际使用的块。
方法一:
LUQX@oradb>select count (distinct dbms_rowid.rowid_block_number(rowid)||'-'||dbms_rowid.rowid_relative_fno (rowid)) "used blocks" from TEST1;

used blocks
-----------
       1589     #查看当前实际使用的块数量
 方法二:
 LUQX@oradb>SELECT COUNT (DISTINCT SUBSTR(rowid,1,15)) Used FROM LUQX.TEST1;   实际使用1589个block

      USED
----------
      1589  #查看当前实际使用的块数量

 查看分配的块
 建议收集统计信息后查看会更准确:analyze table tablename compute statistics;
LUQX@oradb>select blocks,empty_blocks,num_rows from dba_tables where table_name='TEST1';

    BLOCKS EMPTY_BLOCKS   NUM_ROWS
---------- ------------ ----------
      1630	     34    1048576         #查看当前已分配的块数量和行数(可以理解为hwm为1630+34=1664)
HWMBLOCKS = “Blocks Containing data” + “Empty blocks”    
BLOCKS represents the number of blocks 'ever' used by the segment. 
EMPTY_BLOCKS represents only the number of blocks above the 'HIGH WATER MARK' 

删除100万条记录
LUQX@oradb>delete from test1 where rownum<1000000;

999999 rows deleted.

LUQX@oradb>commit;

Commit complete.

LUQX@oradb>analyze table test1 compute statistics;

Table analyzed.

LUQX@oradb>select round((1-a.used/b.num_total)*100,0) percent from
(SELECT COUNT (DISTINCT SUBSTR(rowid,1,15)) Used FROM LUQX.TEST1) a,
(select blocks num_total from dba_tables where table_name='TEST1' and owner='LUQX') b;  2    3  

   PERCENT
---------- 
	95    高水位已经为95  那么此时需要注意了

LUQX@oradb>select blocks num_total from dba_tables where table_name='TEST1' and owner='LUQX';

 NUM_TOTAL
----------
      1630

LUQX@oradb>SELECT COUNT (DISTINCT SUBSTR(rowid,1,15)) Used FROM LUQX.TEST1;

      USED
----------
	74    实际使用为74个块

LUQX@oradb>select blocks,empty_blocks,num_rows from dba_tables where table_name='TEST1';

    BLOCKS EMPTY_BLOCKS   NUM_ROWS
---------- ------------ ----------
      1630	     34      48577     分配块及空闲块未变化。#理解为hwm未降低。

通过执行shrink space操作降低高水位
LUQX@oradb>alter table test1 enable row movement;

Table altered.

LUQX@oradb>alter table test1 shrink space;

Table altered.

LUQX@oradb>analyze table test1 compute statistics;    收集统计信息

Table analyzed.

LUQX@oradb>select round((1-a.used/b.num_total)*100,0) percent from
(SELECT COUNT (DISTINCT SUBSTR(rowid,1,15)) Used FROM LUQX.TEST1) a,
(select blocks num_total from dba_tables where table_name='TEST1' and owner='LUQX') b;  2    3  

   PERCENT
----------
	 0              #通过命令查看水位下已经没有空闲块。


LUQX@oradb>select blocks,empty_blocks,num_rows from dba_tables where table_name='TEST1';

    BLOCKS EMPTY_BLOCKS   NUM_ROWS
---------- ------------ ----------
	74	     14      48577                #同时分配的block数量也下降未74个

降低水位的几种方式

ANALYZE TABLE table_name COMPUTE STATISTICS; 分析表
SELECT blocks, empty_blocks, num_rows FROM dba_tables WHERE  table_name='table_name'; 查询高水位线
方法 1:
alter table table_name enable row movement; 开启行迁移(收缩表操做第一步)
alter table table_name shrink space ; 收缩表空间
alter table table_name disable row movement; 关闭行迁移
1 压缩segment,调整hwm,并马上释放空间
2 shrink是以行为单位重组数据,根据复杂算法从逻辑+物理重组数据
3 shrink的算法是从segment的底部开始,移动row到segment的顶部,移动的过程相当于delete/insert操作的组合,在这个过程中会产生大量的undo和redo信息。
4 耗时可能非常长,通常慢于move。
5 对于空间的要求,shrink不需要额外的空间。
ALTER TABLE TABLE_NAME ENABLE ROW MOVEMENT;
alter table <table_name> shrink space [ <null> | compact | cascade ];
alter table shrink space compact cascade;
ALTER TABLE TABLE_NAME DISABLE ROW MOVEMENT;
cascade: 缩小表及其索引,并移动高水位线,释放空间,这个参数是在shrink table的时候自动级联索引,相当于rebulid index。
compact: 仅仅是缩小表和索引,并不移动高水位线,不释放空间
加上compact选项仅重新整理segment 空间,并压缩表的记录在以后进行release空间。
但数据库并不调整hwm及释放空间.
为了释放空间.你必须再发布alter table shrink space
--compact用于把一个长操作分割为两个较短的操作
如果在业务繁忙时做压缩,可以使用alter table shrink space compact来对表格进行碎片整理,而不调整高水位线,之后再次调用alter table table_name shrink space来释放空间。
也可以使用alter table table_name shrink space cascade来同时对索引都进行收缩,这等同于同时执行alter index idxname shrink space。

方法 2:
alter table table_name move; 移动表需要新建索引 ,表空间需要有足够的空间用于move。可以指定别的表空间
1 会锁表
2 move是以block为单位重组数据,行的rowid都会跟着变化,索引会失效,需要重建索引。
3 需要准备两倍的空间。
create Index new_index On table_name(deptno); 单一索引
create Index new_index on table_name(deptno,job); 复合索引
方法 3:
truncate table table_name; 清空表
方法4:
导出导入表

show_space.sql

tom大神的show space语句可以快速的查看表的空间占用情况信息及表的碎片状态。

CREATE OR REPLACE PROCEDURE show_space(p_segname   IN VARCHAR2,
                                       p_owner     IN VARCHAR2 DEFAULT USER,
                                       p_type      IN VARCHAR2 DEFAULT 'TABLE',
                                       p_partition IN VARCHAR2 DEFAULT NULL) AS
  l_free_blks          NUMBER;
  l_total_blocks       NUMBER;
  l_total_bytes        NUMBER;
  l_unused_blocks      NUMBER;
  l_unused_bytes       NUMBER;
  l_lastusedextfileid  NUMBER;
  l_lastusedextblockid NUMBER;
  l_last_used_block    NUMBER;
  l_segment_space_mgmt VARCHAR2(255);
  l_unformatted_blocks NUMBER;
  l_unformatted_bytes  NUMBER;
  l_fs1_blocks         NUMBER;
  l_fs1_bytes          NUMBER;
  l_fs2_blocks         NUMBER;
  l_fs2_bytes          NUMBER;
  l_fs3_blocks         NUMBER;
  l_fs3_bytes          NUMBER;
  l_fs4_blocks         NUMBER;
  l_fs4_bytes          NUMBER;
  l_full_blocks        NUMBER;
  l_full_bytes         NUMBER;

  PROCEDURE p(p_label IN VARCHAR2,
              p_num   IN NUMBER) IS
  BEGIN
    dbms_output.put_line(rpad(p_label, 40, '.') ||
                         (p_num));
  END;
BEGIN
  EXECUTE IMMEDIATE 'select ts.segment_space_management from dba_segments seg,dba_tablespaces ts where seg.segment_name = :p_segname and (:p_partition is null or seg.partition_name = :p_partition) and seg.owner = :p_owner and seg.tablespace_name=ts.tablespace_name'
    INTO l_segment_space_mgmt
    USING p_segname, p_partition, p_partition, p_owner;

  --     exception
  --             when too_many_rows
  --             then
  --             dbms_output.put_line('This must be a partitioned table,use p_partition => ');
  --             return;
  --     end;

  IF l_segment_space_mgmt = 'AUTO' THEN
    dbms_space.space_usage(p_owner, p_segname, p_type, l_unformatted_blocks,
                           l_unformatted_bytes, l_fs1_blocks, l_fs1_bytes,
                           l_fs2_blocks, l_fs2_bytes, l_fs3_blocks, l_fs3_bytes,
                           l_fs4_blocks, l_fs4_bytes, l_full_blocks,
                           l_full_bytes, p_partition);

    p('Unformatted Blocks  ', l_unformatted_blocks);
    p('FS1 Blocks (0-25)   ', l_fs1_blocks);
    p('FS2 Blocks (25-50)  ', l_fs2_blocks);
    p('FS3 Blocks (50-75)  ', l_fs3_blocks);
    p('FS4 Blocks (75-100) ', l_fs4_blocks);
    p('Full Blocks         ', l_full_blocks);
  ELSE
    dbms_space.free_blocks(segment_owner => p_owner, segment_name => p_segname,
                           segment_type => p_type, freelist_group_id => 0,
                           free_blks => l_free_blks);
  END IF;

  dbms_space.unused_space(segment_owner => p_owner, segment_name => p_segname,
                          segment_type => p_type, partition_name => p_partition,
                          total_blocks => l_total_blocks,
                          total_bytes => l_total_bytes,
                          unused_blocks => l_unused_blocks,
                          unused_bytes => l_unused_bytes,
                          last_used_extent_file_id => l_lastusedextfileid,
                          last_used_extent_block_id => l_lastusedextblockid,
                          last_used_block => l_last_used_block);

  p('Total Blocks ', l_total_blocks);
  p('Total Bytes  ', l_total_bytes);
  p('Total MBytes ', trunc(l_total_bytes / 1024 / 1024));
  p('Unused Blocks', l_unused_blocks);
  p('Unused Bytes ', l_unused_bytes);
  p('Last Used Ext FileId', l_lastusedextfileid);
  p('Last Used Ext BlockId', l_lastusedextblockid);
  p('Last Used Block', l_last_used_block);
END;
/
Procedure created.

执行sql创建对应的存储过程

SYS@oradb>desc show_space;
PROCEDURE show_space
 Argument Name			Type			In/Out Default?
 ------------------------------ ----------------------- ------ --------
 P_SEGNAME			VARCHAR2		IN
 P_OWNER			VARCHAR2		IN     DEFAULT
 P_TYPE 			VARCHAR2		IN     DEFAULT
 P_PARTITION			VARCHAR2		IN     DEFAULT
 参数说明:
  p_segname:对像名称
  p_owner:对像所属用户名  
  p_type:对像类型(常用的:INDEX,TABLE,TABLE PARTITION,INDEX PARTITION,CLUSTER)
  p_partition :如果是分区对像,分区名
调用举例:
BEGIN
 SHOW_SPACE(p_segname => 'test',p_owner => 'test',p_type => 'TABLE PARTITION',p_partition => 'testp1');
END;
或 
exec show_space('test');

查看某个表的信息

查看空表信息:

表中插入数据查看状态

删除表中数据查看状态

执行shrink space后的效果

相关推荐

一个不错的软件版本命名规范!

之前写了一篇如何自动生成版本号的文章,《让你的C程序,自动打印版本信息》初衷是让自己的程序在运行时自动打印与版本相关的信息,避免测试时因为版本信息不确定导致的一些功能对应不上去的问题,当时留了一个坑,...

国产操作系统迎来发展风口 公务领域更能培育起Linux生态

谷歌和微软在俄罗斯市场的一番套路猛如虎,就让我们深刻地意识到了,只有自己的东西才能靠得住。也由此,国内操作系统发展迎来了发展风口。我就看到有朋友就秀出了他们单位采购的纯国产的主机,一款华为的主机,纯国...

5个大有“前途”的Linux桌面发行版本

ZD至顶网CIO与应用频道08月27日专栏:Linux无处不在。你的服务器里,你的电话、汽车、手表、烤面包机、冰箱……和台式机里都有Linux的身影。虽然在桌面上见到Linux的用户比在自动调温...

Linux 常用应用软件大全

编译自:https://www.fossmint.com/most-used-linux-applications/作者:MartinsD.Okoi译者:HankChow对于许多应用程序...

Linux 4.1 系列的最大版本 4.1.18 LTS发布,带来大量修改

(LCTT译注:这是一则过期的消息,但是为了披露更新内容,还是发布出来给大家参考)著名的内核维护者GregKroah-Hartman貌似正在度假中,因为SashaLevin2016年2月16日的...

Linux发行版需要杀软吗?卡巴斯基推出免费KVRT病毒扫描清理工具

IT之家6月4日消息,你认为使用Linux发行版,需要杀毒软件吗?或许很多用户认为Linux发行版偏小众,因此受到黑客攻击的风险也相对较小,不过卡巴斯基并不这么认为,近期推出了适用于...

适合开发人员的 5款 Linux 发行版

什么是Linux?Linux是基于Unix的操作系统。由LinusTorvalds开发于1991年首次发布其内核。因为Linux是开源软件,其发行版由不同组织发布,因此不同的发行版具有不同的风格...

VMware Workstation 17.0 Pro 发布:新增 TPM 2.0 完美兼容Win11

IT之家11月18日消息,VMwareWorkstation17.0Pro现已发布,它带来了许多新特性,例如微软Windows11硬性要求:虚拟可信平台模块(TPM)2.0。...

你是否需要一个容器专用的Linux发行版本?

单单使用容器是不够的,提供商们认为你需要一个容器专用的Linux发行版本。我们可以让容器在不同的操作系统上运行,不同的操作系统都有自己的虚拟化服务,如:SolarisZones、BSDJails、...

Tizen 3.0版本发布 采用Linux 4.1内核

2015-09-2111:31:39作者:马荣【中关村在线软件资讯】9月21日消息:尽管三星靠着Android系统设备在移动市场赚钱,但是仍然没有忘记自家的Tizen开发。现在Tizen3.0版...

欧拉操作系统演进:应用累计超130万套 支持鲲鹏、英特尔、飞腾等芯片

21世纪经济报道记者倪雨晴深圳报道4月15日,在欧拉开发者大会(openEulerDeveloperDay2022)的主论坛上,欧拉首个数字基础设施全场景长周期版openEuler22.03...

Papyros:以Material Design为灵感的Linux发行版本

项目团队并不希望只是采用传统的桌面主题,而是致敬谷歌Android系统的MaterialDesign设计语言想要打造出某些不同以往足够吸引用户的Linux发行版本,自然该版本还在不断的更新和改进中,...

比特网早报:全国空间计量技术委员会成立,银河麒麟操作系统上架微信Linux4.0.0版本

2024年11月6日消息,昨夜今晨,科技圈都发生了哪些大事?行业大咖抛出了哪些新的观点?比特网为您带来值得关注的科技资讯:全国空间计量技术委员会在北京成立近日,经市场监管总局批准,全国空间计量技术委员...

2024年最稳定的5个Linux发行版,赶紧收藏!

Linux是最流行的免费开源平台之一。Linux已被广泛使用,因为它安全、可扩展和灵活。Linux发行版收集开源代码,对其进行编译,并将其组合成一个可以轻松启动和安装的操作系统。它们还提供不同的...

彰显Linux生态繁华,Ubuntu、Fedora等四发行版同时发布新版本

上周对于开源社区来说是忙碌的一周。EndeavourOS和TrueNASScale于周二(4月16日)发布,Fedora于周三(4月17日)发布,Ubuntu于周四(4月18日)发布。四个新版本中都...

取消回复欢迎 发表评论: