oracle中如何删除亿级数据

更新时间：2023年02月15日 10:40:41 作者：心寒丶

这篇文章主要介绍了oracle中如何删除亿级数据问题，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教

oracle删除亿级数据

近期遇到一个日志表记录了几年数据，数据量较大（几亿数据），导致查询等操作较慢，为了提高效率，决定删除部分历史数据，想了三种方法如下：

通用步骤（每种方法之前先运行以下备份脚本）：

1、备份 2021年之前数据

create table table_log_b2020 as  select * from table_log a where a.logtime<date'2021-1-1';

2、备份2021年数据

create table table_log_2021 as  select * from table_log a where a.logtime>=date'2021-1-1';

1、drop table ，然后再create table，插入数据

1、drop table

drop table table_log

2、create table table_log

3、插入2021年数据

insert into table_log select * from table_log_b2021;

2、使用delete批量删除

1、先去掉表索引，因为索引可能会影响删除效率

2、批量执行删除语句，也可以以存过方式直接运行，按照数量删除

delete  from table_log a  where a.logtime<date'2021-1-1' and rownum<5000000

每500万一次，没去索引之前大约耗时85秒，删掉索引之后大约耗时50

3、使用truncate table ，然后再插入数据

1、truncate table

truncate  table table_log   耗时0.5s

2、插入2021年数据

insert into table_log   select * from table_log_b2021;  耗时 0.095s

第一种涉及到删表结构，公司相关规定不可这么做，第二种效率较为低

综合考虑使用了第三种，效率较为可观，秒秒钟把数据干干净。

oracle数据库亿级数据量清理SQL优化常识

#ORACLE #SQL #亿级数据量清理优化

说到删除数据，想到的

第一种方法就是DELETE

确实对于清理数据量比较少的表来说，DELETE是简单直接的方法，但是对于上亿条数据的表来说，这种方式肯定是行不通的，会造成undo表空间的不足。

表数据量如图所示

第二种方法就是truncate

但是我们这里做的是删除表中的部分数据，而不是清空表数据，所以也不能直接truncate，既然不能全部truncate，我们一开始想到的方式是先创建一个临时表，把需要保留的数据拿出来，然后清空表数据只会，再把需要保留的数据放回去，最后删除临时表，这种方式就不会造成undo表空间不足了，但是这样效率很慢，时间很长，从二十亿的数据量中删除一半左右的数据需要八个小时，当然这个和服务器的性能等硬件也有关系，如下如所示的SQL，虽然能够删除成功，但是速度很慢。

 CREATE TABLE SYSADM.PS_GPCN_PAYEE_TBL2022 AS 
 SELECT * 
  FROM SYSADM.PS_GPCN_PAYEE_TBL 
 WHERE EMPLID IN ( 
 SELECT EMPLID3 
  FROM PS_C_PAY_TBL)/ COMMIT/ TRUNCATE TABLE SYSADM.PS_GPCN_PAYEE_TBL/ 
 INSERT INTO SYSADM.PS_GPCN_PAYEE_TBL NOLOGGING 
 SELECT * 
  FROM SYSADM.PS_GPCN_PAYEE_TBL2022/ COMMIT/ 
 DROP TABLE SYSADM.PS_GPCN_PAYEE_TBL2022/ COMMIT/

删除的第三种方式就是DROP

直接把表干掉，drop的速度要比truncate更快，如果drop掉表之后再create，表还不会生成索引，所以如果采用drop的方式，就还要创建索引，这种方式只需要一个小时左右的时间

 CREATE TABLE SYSADM.PS_GP_ITER_TRGR2022 AS 
 SELECT * 
  FROM SYSADM.PS_GP_ITER_TRGR 
 WHERE EMPLID IN ( 
 SELECT EMPLID3 
  FROM PS_C_PAY_TBL)/ COMMIT/ 
 DROP TABLE SYSADM.PS_GP_ITER_TRGR/ 
 CREATE TABLE SYSADM.PS_GP_ITER_TRGR AS 
 SELECT * 
  FROM SYSADM.PS_GP_ITER_TRGR2022 / 
 CREATE INDEX PSAGP_ITER_TRGR ON PS_GP_ITER_TRGR (CAL_RUN_ID 
 , EMPLID 
 , ITER_TRGR_STATUS) tablespace PSINDEX pctfree 10 initrans 2 maxtrans 255 storage ( initial 48K NEXT 112K minextents 1 maxextents unlimited )/ 
 CREATE INDEX PS_GP_ITER_TRGR ON PS_GP_ITER_TRGR (EMPLID 
 , CAL_RUN_ID 
 , ITER_TRGR_STATUS) tablespace PSINDEX pctfree 10 initrans 2 maxtrans 255 storage ( initial 80K NEXT 112K minextents 1 maxextents unlimited )/ 
 DROP TABLE SYSADM.PS_GP_ITER_TRGR2022/ COMMIT/

总结

以上为个人经验，希望能给大家一个参考，也希望大家多多支持脚本之家。

您可能感兴趣的文章:

解决报错ora-32035的方法分析
本篇文章是对解决报错ora-32035的方法进行了详细的分析介绍，需要的朋友参考下
2013-05-05
oracle锁表该如何解决
这篇文章主要给大家介绍了关于oracle锁表如何解决的相关资料，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
2020-11-11
Oracle中如何创建用户、表(1)
这篇文章主要介绍了Oracle中如何创建用户、表(1)问题，具有很好的参考价值，希望对大家有所帮助。如有错误或未考虑完全的地方，望不吝赐教
2023-02-02
Oracle中字符串截取常用方法总结【推荐】
这篇文章主要介绍了Oracle中字符串截取常用方法总结，非常不错，具有一定的参考借鉴价值,需要的朋友可以参考下
2018-11-11
centos下Oracle11G图文安装教程
这篇文章主要为大家详细介绍了centos下Oracle11G图文安装教程，具有一定的参考价值，感兴趣的小伙伴们可以参考一下
2017-07-07
在Tomcat服务器下使用连接池连接Oracle数据库
本文为大家介绍下在Tomcat服务器下使用连接池来连接数据库的操作，下面有个不错的示例，大家可以参考下
2014-01-01
Oracle连续相同数据的统计
今天小编就为大家分享一篇关于Oracle连续相同数据的统计，小编觉得内容挺不错的，现在分享给大家，具有很好的参考价值，需要的朋友一起跟随小编来看看吧
2019-01-01
解决Oracle删除重复数据只留一条的方法详解
本篇文章是对Oracle删除重复数据只留一条的解决方法进行了详细的分析介绍，需要的朋友参考下
2013-05-05
Windows系统下Oracle数据库每天自动备份
linux和unix下面使用shell可以很方便实现，如果windows环境下可以结合计划任务实现自动备份，下面通过本文给大家介绍实现方法，需要的朋友参考下吧
2016-12-12
Oracle递归查询简单示例
最近在做一个树状编码管理系统,其中用到了oracle的树状递归查询,下面这篇文章主要给大家介绍了关于Oracle递归查询的相关资料,文中通过实例代码介绍的非常详细,需要的朋友可以参考下
2022-11-11