百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 优雅编程 > 正文

Oracle数据库瘦身方案--清理大表历史数据

sinye56 2024-09-21 02:31 4 浏览 0 评论

概述

这部分内容是要在数据已备份或者迁移成功的基础上才做的,前面我们已经针对这表空间千万级别以上的表做了迁移,并数据校验一致了,下面主要是来删除源库上的数据了。


1、删除源库数据

1.1、存储过程删除

因为有一张上亿的表,如果直接删除怕UNDO空间爆了,所以写了个存储过程来循环删除,内容如下:

create table t_jindu(id int,name varchar2(60),sum int);

declare 
i int; --定义变量
v_count int; --定义变量
v_loop int; --定义变量
begin 
 select count(*) into v_count from TAB_SP_OTMSHIPMENT where insert_time<=to_date('20180630 00:00:00','yyyymmdd hh24:mi:ss') ; --计算表
 select ceil(v_count/5000) into v_loop from dual; --计算需要循环次数
 i:=1; --为i赋值
 while i<=v_loop loop --循环退出条件
 delete from TAB_SP_OTMSHIPMENT where insert_time<=to_date('20180630 00:00:00','yyyymmdd hh24:mi:ss') and rownum<5000;
 insert into t_jindu values(i,'TAB_SP_OTMSHIPMENT',v_loop); --记录删除次数进度
 commit; --提交
 i:=i+1; --i依次加1
 end loop;
EXCEPTION 
 WHEN OTHERS THEN
 ROLLBACK; --有问题回滚
end;
/ 

因为删除比较久,所以每次删除都会记录到进度表里面,这样直接查这个表就知道目前删除的进度了,这种方法是最稳妥的,基本不会对目前系统造成太大的影响。但是在测试环境测试删除一张一亿的表删除了整整5天5夜还没删除完,所以最后还是放弃了~


1.2、开并行度删除

遵循数据量从小到大删除、删除后业务验证后再继续删除原则。

注意观察UNDO表空间使用率(观察连接的是哪个实例,然后看对应的UNDO空间,假设UDNOTBS1使用了比较多空间,就需要连接到RFDB2实例,充分利用UNDO空间),归档空间情况(虽然已经nologging,但归档日志还是有发生切换,需要注意)及数据库服务器负载和告警日志。

删除命令如下:

alter table TABRECEIVING_LINE nologging;
delete /*+parallel(t 6)*/ from TABRECEIVING_LINE t where insert_time<=to_date('20180630 00:00:00','yyyymmdd hh24:mi:ss');
commit;
alter table TABRECEIVING_LINE logging;

2、高水位回收&收集统计信息

这里针对每个大表,删除大量数据后,都需进行高水位回收和收集统计信息。

2.1、高水位回收

涉及命令如下:

alter table my_objects nologging;
alter table my_objects enable row movement;
alter table my_objects shrink space;
alter table my_objects logging;

2.2、收集统计信息

涉及命令如下:

ANALYZE TABLE my_objects COMPUTE STATISTICS;

3、输出清单

记录清单如下:


数据库大表历史数据清理这块的内容就介绍到这了,后面会分享更多devops和DBA方面的内容,感兴趣的朋友可以关注下!

相关推荐

Linux在线安装JDK1.8

首先在服务器pingwww.baidu.com查看是否可以连网然后就可以在线下载一、下载安装JDK1.81、在下载安装的同时做好一些准备工作...

Linux安装JDK,超详细

1、了解RPMRPM是Red-HatPackageManager(RPM软件包管理器)的缩写,这一文件格式名称虽然打上了RedHat的标志,但是其原始设计理念是开放式的,现在包括OpenLinux...

Linux安装jdk1.8(超级详细)

前言最近刚购买了一台阿里云的服务器准备要搭建一个网站,正好将网站的一个完整搭建过程分享给大家!#一、下载jdk1.8首先我们需要去下载linux版本的jdk1.8安装包,我们有两种方式去下载安装...

Linux系统安装JDK教程

下载jdk-8u151-linux-x64.tar.gz下载地址:https://www.oracle.com/technetwork/java/javase/downloads/index.ht...

干货|JDK下载安装与环境变量配置图文教程「超详细」

1.JDK介绍1.1什么是JDK?SUN公司提供了一套Java开发环境,简称JDK(JavaDevelopmentKit),它是整个Java的核心,其中包括Java编译器、Java运行工具、Jav...

Linux下安装jdk1.8

一、安装环境操作系统:CentOSLinuxrelease7.6.1810(Core)JDK版本:1.8二、安装步骤1.下载安装包...

Linux上安装JDK

以CentOS为例。检查是否已安装过jdk。yumlist--installed|grepjdk或者...

Linux系统的一些常用目录以及介绍

根目录(/):“/”目录也称为根目录,位于Linux文件系统目录结构的顶层。在很多系统中,“/”目录是系统中的唯一分区。如果还有其他分区,必须挂载到“/”目录下某个位置。整个目录结构呈树形结构,因此也...

Linux系统目录结构

一、系统目录结构几乎所有的计算机操作系统都是使用目录结构组织文件。具体来说就是在一个目录中存放子目录和文件,而在子目录中又会进一步存放子目录和文件,以此类推形成一个树状的文件结构,由于其结构很像一棵树...

Linux文件查找

在Linux下通常find不很常用的,因为速度慢(find是直接查找硬盘),通常我们都是先使用whereis或者是locate来检查,如果真的找不到了,才以find来搜寻。为什么...

嵌入式linux基本操作之查找文件

对于很多初学者来说都习惯用windows操作系统,对于这个系统来说查找一个文件简直不在话下。而学习嵌入式开发行业之后,发现所用到的是嵌入式Linux操作系统,本想着跟windows类似,结果在操作的时...

linux系统查看软件安装目录的方法

linux系统下怎么查看软件安装的目录?方法1:whereis软件名以查询nginx为例子...

Linux下如何对目录中的文件进行统计

统计目录中的文件数量...

Linux常见文件目录管理命令

touch用于创建空白文件touch文件名称mkdir用于创建空白目录还可以通过参数-p创建递归的目录...

Linux常用查找文件方法总结

一、前言Linux系统提供了多种查找文件的命令,而且每种查找命令都具有其独特的优势,下面详细总结一下常用的几个Linux查找命令。二、which命令查找类型:二进制文件;...

取消回复欢迎 发表评论: