【Oracle】Package 存储过程编写以及其他实用技术
sinye56 2024-10-09 19:38 6 浏览 0 评论
这篇文章是之前自己在公司的一篇技术分享,搬过来就不提供脚本了!
前段时间在处理生产异常时发现,测试数据库和仿真数据库已很久没有同步生产的清洗后数据和数据结构。开发人员在处理生产异常时往往要在测试或者仿真环境中重新模拟数据来进行场景复现,若需要以大量数据为基础进行复现时就比较痛苦了。
目前遇到这种情况还需要知会运维人员到生产数据库备份数据,先导出dmp再导入测试或仿真环境,之后还需要对数据进行敏感信息清洗。由于数据的特殊性,这个过程只能通过运维人员手动处理,非常容易出错且效果不理想(这里会涉及到一些blob字段无法导入到系统中,还有表空间不一致也影响导入的情况)。有鉴于此,我决定写一个同步存储过程实现自动化同步。
与一般的存储过程不一样,本次的存储过程是通过编写Oracle的Package(包头)和 Package Body(包体)来实现同步的。如下图:
其中TIMSSPRD_SYNC是数据库同步入口,而TIMSS_TABLE是同步表方法的入口。
之所以使用Package来编写存储过程的原因在于:
1. 对于程序员来说,Package/Package Body的写法更贴近于面向对象的开发理念(个人认为跟Java中的接口和接口实现类如出一辙);
2. Package内的方法可以重载,也可以存在多个同名的方法根据参数的个数或者参数的类型找到正确的方法;
3. Package可以被其他用户调用,是全局的方法;
4. Package既然是全局的,那当然也可以被授权咯(可以按需分批,那些用户可以用,那些用户不可以用);
先打开TIMSSPRD_SYNC,里面有一个TIMSS_SYNC_PRO的方法,里面有四个参数分别是OPER_SORT(同步类型)、OPER_TYPE(同步方式)、OPER_TABLE(同步表名)和OPER_PREFIX(同步前缀),如下图:
1. OPER_SORT(同步类型) :脚本将根据填入的内容去更新指定的类型信息
2. OPER_TYPE(同步方式) :是include(包含)还是exclude(排除)
3. OPER_TABLE(同步表名) :其实这个字段不单单是表名(因为现在只有表),这里应该是同步对象的名称
4. OPER_PREFIX(同步前缀) :同理,这里应该是同步对象的前缀
按照存储过程的逻辑,如果什么参数都不填的话会执行全类型更新(这无疑跟dmp方式一致,虽然基本不会用到但还是提供吧)。否则按照同步信息去判断需要调用的方法。OK,来到这里先告一段落,下面在看看TIMSS_TABLE这个Packages。
在TIMSS_TABLE中里面就是真正的执行方法共四个,分别是:ORGANIZE_DATA(整理数据)、CREATE_AND_BAK_TABLE(创建与备份表)、CREATE_TABLE_EXEC(执行创建表)和DROP_TABLE(表删除),如下图:
由于涉及到公司内部的同步逻辑,这四个方法的具体内容就不说了但在编写TIMSS_TABLE中用到了6个有用的存储过程知识想给各位分享一下:
1 使用自定义函数去对参数内容进行分割(Oracle是没有自带分割函数)
为了方便使用在网上抄了一个自定义函数_SPLITSTR(需要分割的字符串,分割字符)_,如下图:
这个函数最后是以管道(Pipelined)的方式返回,用一个虚拟的Table将其内容接住 ,如下图:
2 在存储过程中Exception异常捕获的使用
Begin
执行方法...
Exception When Others Then
异常处理信息...
End;
实际使用效果如下:
这能够更优雅地获取到存储过程中的异常信息。
3 采用Using进行赋值即使变量内容含特殊字符也不会抛错
4 Dbms_Lock.Sleep跟Java线程中Sleep用法一致
有时候某些操作是需要按顺序执行的,存储过程在模拟多线程处理(这个后面会进行分享如何将Oracle数据库模拟多线程操作)时太快很容易发生数据冲突,这时就需要用_Dbms_Lock.Sleep_方法让它暂停线程(不过这个_Dbms_Lock_的包需要管理员权限开放给需要的用户才可以使用,比较麻烦 )
5 使用Drop Table的时候加上Purge,可以减少表空间的消耗
因为Oracle是有闪回_(FlashBack)的功能的,平常删除的东西其实会存放在回收站(Recycle Bin)_里面不会被立即清除,这是为了方便闪回时恢复数据。所以一般Drop Table后虽然表已经删除了,但表空间是不会释放。为此这次存储过程需加上_Purge_来让这个表彻底删除(这里的处理逻辑是先创建好目标表后删除掉备份表)同时释放表空间。日常使用不建议使用这种方式,误操作后不能通过FlashBack恢复是非常危险的。
6 PL/SQL的Brower里面应是默认设置为“My Objects“
好几次看到同事们的PL/SQL一打开就是“All Objects”这样是非常危险的。如果用DBA的账号登陆你会发现目录树的每个节点都可以看到系统级别内容,像是什么 SYS.XXX开头的文件。万一不小心给删除掉了,那整个实例就完蛋了。建议都将自己的PL/SQL设置一下,哪怕你现在不需要用到DBA的账号也好,养成一个好习惯是没错的。
设置可以通过_Tools->Preferences->User Interface->Browser_点击_Filters..._按钮去进行设置,如下图:
坦白说,这个存储过程其实还存在很多问题,譬如大数据量同步的时候就不能使用这个存储过程了、DBlink本身也存在lob数据类型同步问题、存储过程内没有做同步信息记录(这个需要的话要后续跟进)......
相关推荐
- 一个不错的软件版本命名规范!
-
之前写了一篇如何自动生成版本号的文章,《让你的C程序,自动打印版本信息》初衷是让自己的程序在运行时自动打印与版本相关的信息,避免测试时因为版本信息不确定导致的一些功能对应不上去的问题,当时留了一个坑,...
- 国产操作系统迎来发展风口 公务领域更能培育起Linux生态
-
谷歌和微软在俄罗斯市场的一番套路猛如虎,就让我们深刻地意识到了,只有自己的东西才能靠得住。也由此,国内操作系统发展迎来了发展风口。我就看到有朋友就秀出了他们单位采购的纯国产的主机,一款华为的主机,纯国...
- 5个大有“前途”的Linux桌面发行版本
-
ZD至顶网CIO与应用频道08月27日专栏:Linux无处不在。你的服务器里,你的电话、汽车、手表、烤面包机、冰箱……和台式机里都有Linux的身影。虽然在桌面上见到Linux的用户比在自动调温...
- Linux 常用应用软件大全
-
编译自:https://www.fossmint.com/most-used-linux-applications/作者:MartinsD.Okoi译者:HankChow对于许多应用程序...
- Linux 4.1 系列的最大版本 4.1.18 LTS发布,带来大量修改
-
(LCTT译注:这是一则过期的消息,但是为了披露更新内容,还是发布出来给大家参考)著名的内核维护者GregKroah-Hartman貌似正在度假中,因为SashaLevin2016年2月16日的...
- Linux发行版需要杀软吗?卡巴斯基推出免费KVRT病毒扫描清理工具
-
IT之家6月4日消息,你认为使用Linux发行版,需要杀毒软件吗?或许很多用户认为Linux发行版偏小众,因此受到黑客攻击的风险也相对较小,不过卡巴斯基并不这么认为,近期推出了适用于...
- 适合开发人员的 5款 Linux 发行版
-
什么是Linux?Linux是基于Unix的操作系统。由LinusTorvalds开发于1991年首次发布其内核。因为Linux是开源软件,其发行版由不同组织发布,因此不同的发行版具有不同的风格...
- VMware Workstation 17.0 Pro 发布:新增 TPM 2.0 完美兼容Win11
-
IT之家11月18日消息,VMwareWorkstation17.0Pro现已发布,它带来了许多新特性,例如微软Windows11硬性要求:虚拟可信平台模块(TPM)2.0。...
- 你是否需要一个容器专用的Linux发行版本?
-
单单使用容器是不够的,提供商们认为你需要一个容器专用的Linux发行版本。我们可以让容器在不同的操作系统上运行,不同的操作系统都有自己的虚拟化服务,如:SolarisZones、BSDJails、...
- Tizen 3.0版本发布 采用Linux 4.1内核
-
2015-09-2111:31:39作者:马荣【中关村在线软件资讯】9月21日消息:尽管三星靠着Android系统设备在移动市场赚钱,但是仍然没有忘记自家的Tizen开发。现在Tizen3.0版...
- 欧拉操作系统演进:应用累计超130万套 支持鲲鹏、英特尔、飞腾等芯片
-
21世纪经济报道记者倪雨晴深圳报道4月15日,在欧拉开发者大会(openEulerDeveloperDay2022)的主论坛上,欧拉首个数字基础设施全场景长周期版openEuler22.03...
- Papyros:以Material Design为灵感的Linux发行版本
-
项目团队并不希望只是采用传统的桌面主题,而是致敬谷歌Android系统的MaterialDesign设计语言想要打造出某些不同以往足够吸引用户的Linux发行版本,自然该版本还在不断的更新和改进中,...
- 比特网早报:全国空间计量技术委员会成立,银河麒麟操作系统上架微信Linux4.0.0版本
-
2024年11月6日消息,昨夜今晨,科技圈都发生了哪些大事?行业大咖抛出了哪些新的观点?比特网为您带来值得关注的科技资讯:全国空间计量技术委员会在北京成立近日,经市场监管总局批准,全国空间计量技术委员...
- 2024年最稳定的5个Linux发行版,赶紧收藏!
-
Linux是最流行的免费开源平台之一。Linux已被广泛使用,因为它安全、可扩展和灵活。Linux发行版收集开源代码,对其进行编译,并将其组合成一个可以轻松启动和安装的操作系统。它们还提供不同的...
- 彰显Linux生态繁华,Ubuntu、Fedora等四发行版同时发布新版本
-
上周对于开源社区来说是忙碌的一周。EndeavourOS和TrueNASScale于周二(4月16日)发布,Fedora于周三(4月17日)发布,Ubuntu于周四(4月18日)发布。四个新版本中都...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle忘记用户名密码 (59)
- oracle11gr2安装教程 (55)
- mybatis调用oracle存储过程 (67)
- oracle spool的用法 (57)
- oracle asm 磁盘管理 (67)
- 前端 设计模式 (64)
- 前端面试vue (56)
- linux格式化 (55)
- linux图形界面 (62)
- linux文件压缩 (75)
- Linux设置权限 (53)
- linux服务器配置 (62)
- mysql安装linux (71)
- linux启动命令 (59)
- 查看linux磁盘 (72)
- linux用户组 (74)
- linux多线程 (70)
- linux设备驱动 (53)
- linux自启动 (59)
- linux网络命令 (55)
- linux传文件 (60)
- linux打包文件 (58)
- linux查看数据库 (61)
- linux获取ip (64)
- linux进程通信 (63)