今天，1万多张oracle导出表进行数据完整性统计
sinye56 2024-10-06 00:37 8 浏览 0 评论
世界纷纷扰扰，我在单位加班！
今天对1万多张的oracle导出表进行数据完整性统计，有些表是分区表，导出日志会有每个分区的大小和记录数；而有些表是数据表，直接就有大小和记录数。首先把分区表区分开，然后根据每个分区进行大小累加和记录数累加，从而获得分区表的表大小。
先用awk把oracle的导出日志转换为如下格式：
grep exported *.log|grep '":"'|awk -F '[:"]' '{print $4,$8}' >part.out
这样part.out的数据格式就是这样的：
table1 105.4 MB 505234 rows
table1 91.20 MB 381566 rows
table2 77.13 MB 320116 rows
table3 74.92 MB 319594 rows
table1 105.4 GB 505234 rows
table1 91.20 GB 381566 rows
table2 77.13 MB 320116 rows
table3 74.92 MB 319594 rows
table1 105.4 KB 505234 rows
table1 91.20 KB 381566 rows
table2 77.13 MB 320116 rows
table3 74.92 MB 319594 rows
然后再编写一个shell程序统计每张数据表的大小和记录总数：
#!/bin/bash
awk ‘{
table = $1
rows= $4
size= $2
rows_total[table] += rows
if( $3 == "GB") { size=size*1024*1024;}
else if( $3 == "MB" ){ size=size*1024;
size_total[table]+=size
}
}
END{
for (table in rows_total){
if(size_total[table]>1024) {
size_total[table]=size_total[table]/1024
print table " "size_total[table]" MB "rows_total[table]" rows part"
}else{
print table " "size_total[table]" KB "rows_total[table]" rows part"
}
}
}’
part.out|sort -rn -k4
相关推荐
- Linux中10大常用命令之sort使用案例
-
请关注本头条号，每天坚持更新原创干货技术文章。如需学习视频，请在微信搜索公众号“智传网优”直接开始自助视频学习1.前言Linux中的sort命令用于对文本文件的内容进行排序。本教程向您展示了sort...
- java开发常用的Linux命令，高频的没你想象的多
-
Linux的命令非常多，多到有些使用的场景你工作两三年也没有遇到过，工作三四年才能遇到（Linux内核开发，Shell脚本开发，嵌入式开发、、、），但这个不是今天分享的重点，今天分享的重点是Java开...
- linux常用命令(收藏版)
-
linux小白注意啦，给大家分享一点干货，请笑纳！1.关机命令shutdown-hnow关闭系统(1)init0关闭系统(2)，0为系统的进程号telinit0关闭系统(3)shutdo...
- 延续Win10三年需付超3000元!微软彻底封堵:删除绕过Win11系统要求教程、将第三方工具标记为恶意软件
-
一切都是为了用户能够正规地升级到Windows11。整理|屠敏出品|CSDN（ID：CSDNnews）距离Windows10退役仅剩8个月，微软最近这段时间，终是忍不住接连出手了...
- 敲完就让你提桶跑路的Linux命令
-
不谨慎可能就会让你提桶的Linux命令！！！删除文件rm-rf该命令是删除文件或文件夹等最快的方式之一。删除后的内容很难恢复，如果删除系统文件可能会导致系统崩坏。˃rm-rf/#强制删除根...
- 超级蠕虫，累计感染40万台服务器，让Linux内核服务器感染两年
-
最近著名安全公司ESET发布安全报告，报告分析了其对一个超级蠕虫Ebury的15年追踪分析。在15年中该病毒持续感染了40万台服务器，曾经在2011年（2009年）攻克了Linux内核维护站点kern...
- linux redhat破解密码
-
适用于RedhatCentosFedora1.开机选择第一个启动项，按e进入编辑模式2.在启动项编辑模式找到linux16开头的文件，按ctrl+e快速定位到该行的行末，输入空格rd.break...
- 慎用!Linux最危险的10个命令!
-
Linux是一个强大而灵活的操作系统，它提供了许多功能丰富的命令和工具，让用户可以方便地管理和控制系统。但是，有些命令如果不小心或不知情地使用，可能会造成严重的后果，甚至导致系统崩溃或数据丢失。因此，...
- Linux文件和目录删除
-
今天只讲一个命令，这个命令已经让万千运维人既爱又恨。rm删除文件或者目录基本用法：-i显示删除提示信息-f强制删除文件-r进行目录的递归删除在公司里为了保证数据安全，一般会创建一个alias...
- 给你的Linux系统穿上“防弹衣”:安全加固全攻略
-
为什么Linux系统需要安全加固在当今数字化时代，Linux系统以其开源、稳定、高效等特性，在服务器领域占据着举足轻重的地位。无论是大型互联网公司的核心业务，还是中小企业的日常运营，都离不开L...
- 一天一个Linux命令:文件操作「删」rm
-
命令：rm-rf文件名(慎用，慎用，慎用)rm(选项)(参数)命令功能：rm-rf是一条UNIX系统下的文件删除命令，作用是无提示地强制递归删除一个目录中的一个或多个文件或目录，如果没有使用...
- Linux下通过 rm -f 删除大量文件时报错:Argument list too long
-
问题现象云服务器ECSLinux下通过rm-f删除大量的小文件时出现类似如下错误信息：-bash:?/bin/rm:?Argument?list?too?long如下图所示：问题原因如?待删...
- 这10个Linux命令太危险，千万慎用!数据毁灭的瞬间只需一个回车
-
你好，这里是网络技术联盟站，我是瑞哥。Linux系统，以其开源自由的特性，吸引了无数开发者和科技爱好者。其强大的命令行工具赋予了用户前所未有的控制能力。然而，正如俗话所说，“能力越大，责任越大”。某些...
- Linux的10大危险命令，用过的运维都很刑
-
rm-rf命令该命令可能导致不可恢复的系统崩坏。˃rm-rf/#强制删除根目录下所有东西。˃rm-rf*#强制删除当前目录的所有文件。˃rm-rf.#强制删除当前...
- Linux环境变量设置与查看全攻略
-
Linux环境变量设置与查看全攻略在Linux系统中，环境变量是用于定义系统和用户级设置的一种方法，它可以影响程序的行为和系统的运行方式。了解如何设置和查看环境变量对于Linux用户来说是非常重要的技...
欢迎 你 发表评论:
- 一周热门
- 最近发表
- 标签列表
-
- oracle忘记用户名密码 (59)
- oracle11gr2安装教程 (55)
- mybatis调用oracle存储过程 (67)
- oracle spool的用法 (57)
- oracle asm 磁盘管理 (67)
- 前端 设计模式 (64)
- 前端面试vue (56)
- linux格式化 (55)
- linux图形界面 (62)
- linux文件压缩 (75)
- Linux设置权限 (53)
- linux服务器配置 (62)
- mysql安装linux (71)
- linux启动命令 (59)
- 查看linux磁盘 (72)
- linux用户组 (74)
- linux多线程 (70)
- linux设备驱动 (53)
- linux自启动 (59)
- linux网络命令 (55)
- linux传文件 (60)
- linux打包文件 (58)
- linux查看数据库 (61)
- linux获取ip (64)
- linux进程通信 (63)