百度360必应搜狗淘宝本站头条
linux文件压缩linux用户组查看linux磁盘mysql安装linuxlinux多线程
当前位置：网站首页 > 优雅编程 > 正文

今天，1万多张oracle导出表进行数据完整性统计

sinye56 2024-10-06 00:37 5 浏览 0 评论

世界纷纷扰扰，我在单位加班！

今天对1万多张的oracle导出表进行数据完整性统计，有些表是分区表，导出日志会有每个分区的大小和记录数；而有些表是数据表，直接就有大小和记录数。首先把分区表区分开，然后根据每个分区进行大小累加和记录数累加，从而获得分区表的表大小。

先用awk把oracle的导出日志转换为如下格式：

grep exported *.log|grep '":"'|awk -F '[:"]' '{print $4,$8}' >part.out

这样part.out的数据格式就是这样的：

table1 105.4 MB 505234 rows

table1 91.20 MB 381566 rows

table2 77.13 MB 320116 rows

table3 74.92 MB 319594 rows

table1 105.4 GB 505234 rows

table1 91.20 GB 381566 rows

table2 77.13 MB 320116 rows

table3 74.92 MB 319594 rows

table1 105.4 KB 505234 rows

table1 91.20 KB 381566 rows

table2 77.13 MB 320116 rows

table3 74.92 MB 319594 rows

然后再编写一个shell程序统计每张数据表的大小和记录总数：

#!/bin/bash

awk ‘{

table = $1

rows= $4

size= $2

rows_total[table] += rows

if( $3 == "GB") { size=size*1024*1024;}

else if( $3 == "MB" ){ size=size*1024;

size_total[table]+=size

}

}

END{

for (table in rows_total){

if(size_total[table]>1024) {

size_total[table]=size_total[table]/1024

print table " "size_total[table]" MB "rows_total[table]" rows part"

}else{

print table " "size_total[table]" KB "rows_total[table]" rows part"

}

}

}’

part.out|sort -rn -k4

相关推荐

Linux基础知识之修改root用户密码

现象：Linux修改密码出现：Authenticationtokenmanipulationerror。故障解决办法：进入单用户，执行pwconv，再执行passwdroot。...

Linux如何修改远程访问端口

对于Linux服务器而言，其默认的远程访问端口为22。但是，出于安全方面的考虑，一般都会修改该端口。下面我来简答介绍一下如何修改Linux服务器默认的远程访问端口。对于默认端口而言，其相关的配置位于/...

如何批量更改文件的权限

如果你发觉一个目录结构下的大量文件权限(读、写、可执行)很乱时,可以执行以下两个命令批量修正：批量修改文件夹的权限chmod755-Rdir_name批量修改文件的权限finddir_nam...

CentOS「linux」学习笔记10:修改文件和目录权限

?linux基础操作：主要介绍了修改文件和目录的权限及chown和chgrp高级用法6.chmod修改权限1：字母方式[修改文件或目录的权限]u代表所属者，g代表所属组，o代表其他组的用户，a代表所有...

Linux下更改串口的权限

问题描述我在Ubuntu中使用ArduinoIDE，并且遇到串口问题。它过去一直有效，但由于可能不必要的原因，我觉得有必要将一些文件的所有权从root所有权更改为我的用户所有权。...

Linux chown命令:修改文件和目录的所有者和所属组

chown命令，可以认为是"changeowner"的缩写，主要用于修改文件（或目录）的所有者，除此之外，这个命令也可以修改文件（或目录）的所属组。当只需要修改所有者时，可使用...

chmod修改文件夹及子目录权限的方法

chmod修改文件夹及子目录权限的方法打开终端进入你需要修改的目录然后执行下面这条命令chmod777*-R全部子目录及文件权限改为777查看linux文件的权限：ls-l文件名称查看li...

Android 修改隐藏设置项权限

在Android系统中，修改某些隐藏设置项或权限通常涉及到系统级别的操作，尤其是针对非标准的、未在常规用户界面显示的高级选项。这些隐藏设置往往与隐私保护、安全相关的特殊功能有关，或者涉及开发者选项、权...

完蛋了!我不小心把Linux所有的文件权限修改了!在线等修复!

最近一个客户在群里说他一不小心把某台业务服务器的根目录权限给改了，本来想修改当前目录，结果执行成了根目录。...

linux改变安全性设置-改变所属关系

CentOS7.3学习笔记总结（五十八）-改变安全性设置-改变所属关系在以前的文章里，我介绍过linux文件权限，感兴趣的朋友可以关注我，阅读一下这篇文章。这里我们不在做过的介绍，注重介绍改变文件或者...

Python基础到实战一飞冲天(一)--linux基础(七)修改权限chmod

#07_Python基础到实战一飞冲天（一）--linux基础（七）--修改权限chmod-root-groupadd-groupdel-chgrp-username-passwd...

linux更改用户权限为root权限方法大全

背景在使用linux系统时，经常会遇到需要修改用户权限为root权限。通过修改用户所属群组groupid为root，此操作只能使普通用户实现享有部分root权限，普通用户仍不能像root用户一样享有超...

怎么用ip命令在linux中添加路由表项?

在Linux中添加路由表项，可以使用ip命令的route子命令。添加路由表项的基本语法如下：sudoiprouteadd<network>via<gateway>这...

Linux配置网络

1、网卡名配置相关文件回到顶部网卡名命名规则文件：/etc/udev/rules.d/70-persistent-net.rules#PCIdevice0x8086:0x100f(e1000)...

Linux系列---网络配置文件

1.网卡配置文件在/etc/sysconfig/network-scripts/下:[root@oldboynetwork-scripts]#ls/etc/sysconfig/network-s...

取消回复欢迎 你 发表评论:

一周热门
最近发表
标签列表