Oracle数据库更新大批量数据案例

 更新时间:2018年10月17日 17:15:54   作者:打死你个龟孙*  
今天小编就为大家分享一篇关于Oracle数据库更新大批量数据案例,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧

更新大批量数据的背景:

用户需要将VIP的微信标识,传给用户的ERP会员档案中,已知存量数据约50W行数据,线下的微信标识数据我们开发提供了openid和erpid的csv文件,erpid和线下的会员档案id对应,需要将openid也更新到会员档案里。

更新数量大致分为两大步骤

一、将我们要更新的数据源导入数据库内,需要创建临时表,将数据传入临时表
二、写游标,将临时表内的数据与需要更新的数据进行更新

1.将csv文件里面的数据导入数据库临时表中,先创建临时表

create table vip_openid
(erpid number(10),
 openid varchar(200)
)

2.临时表创建后,将cvs文件里的数据导入表中,在这里我们选择工具>文本导入器 

选择要导入的csv文件,注意csv文件的表字段和数据库表字段对应 

选择文件后在界面将会预览导入的数据 

3.点击到oracle的数据,选择导入的表,先选择用户名,用户名下的表名,然后选择表与csv文件表字段对应关系,我们选择导入,可以看到提示导入完成。

4.接下来就是对会员表和临时表的数据关联更新,我们先使用直接update方式进行更新试验,该方法只更新5W数据,耗时12分钟左右:

于是参考百度文档建议,写了一个游标如下

declare
 cursor cur is--声明游标cur
 select B.openid,A.ID ROW_ID
  FROM C_CLIENT_VIP A ,VIP_OPENID B
  WHERE A.ID=B.ERPID
  ORDER BY A.ID;--从A和B表中找到ID对应的openid,并对游标内数组排序
 V_COUNTER NUMBER;--声明一个number类型的变量
BEGIN 
V_VOUNTER:=0;--初始化变量值为0
 FOR ROW IN CUR LOOP--遍历游标
  UPDATE C_CLIENT_VIP A SET A.OPENID=ROW.OPENID WHERE A.ID=ROW_ID;
    V_COUNTER:=V_COUNTER+1;--每次循环变量值+1
  IF(V_COUNTER>=1000) THEN
    COMMIT;
    V_COUNTER:=0;--每更新1000行,V_COUNTER值为1000时候,就提交给数据库
    提交后将变量归零,继续下一个1000行更新
  END IF;
 END LOOP;
  COMMIT;
END;


大概48W行数据,43秒即更新完毕。

使用以上方式注意一点,因为数据库会员表的ID有索引,所以使用游标速率很快。如我们的多表关联字段没有索引,使用此方式可能效果不是很明显。

总结

以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作具有一定的参考学习价值,谢谢大家对脚本之家的支持。如果你想了解更多相关内容请查看下面相关链接

相关文章

  • Oracle监听日志定期清理

    Oracle监听日志定期清理

    这篇文章主要介绍了Oracle监听日志定期清理的相关资料,需要的朋友可以参考下
    2017-10-10
  • Oracle数据库下载及安装图文操作步骤

    Oracle数据库下载及安装图文操作步骤

    本文将介绍Oracle数据库下载及安装等一系列步骤,需要了解的朋友可以参考下
    2012-12-12
  • ORACLE查询表最近更改数据的方法

    ORACLE查询表最近更改数据的方法

    修改项目时,涉及到了Oracle中许多表的修改(包括:增加、删除字段,修改注释等)。由于开始没有进行记录,造成在上测试机时,忘记了具体修改过哪些表了
    2012-11-11
  • oracle 多个字符替换实现

    oracle 多个字符替换实现

    CSDN上的一个网友,需要一个sql语句的解决方案需求是这样的求写oracle多个字符替换(有测试数据)
    2009-10-10
  • Oracle基础:程序中调用sqlplus的方式

    Oracle基础:程序中调用sqlplus的方式

    今天小编就为大家分享一篇关于Oracle基础:程序中调用sqlplus的方式,小编觉得内容挺不错的,现在分享给大家,具有很好的参考价值,需要的朋友一起跟随小编来看看吧
    2018-12-12
  • Oracle用户密码过期和用户被锁的解决方法

    Oracle用户密码过期和用户被锁的解决方法

    这篇文章主要介绍了Oracle用户密码过期和用户被锁的解决方法,需要的朋友可以参考下
    2017-04-04
  • Oracle 11g下编译使用BBED的方法教程

    Oracle 11g下编译使用BBED的方法教程

    这篇文章主要给大家介绍了在Oracle 11g下编译使用BBED的方法教程,文中详细介绍了关于拷贝缺失文件、编译BBED以及BBED使用测试的相关资料,通过示例代码介绍的非常详细,需要的朋友们下面来一起看看吧。
    2017-07-07
  • oracle基本查询用法入门示例

    oracle基本查询用法入门示例

    这篇文章主要介绍了oracle基本查询用法,结合简单示例形式分析了oracle数据库常见查询语句基本语法与相关使用技巧,需要的朋友可以参考下
    2020-02-02
  • ORACLE中的的HINT详解

    ORACLE中的的HINT详解

    本篇文章主要介绍了ORACLE中的的HINT详解,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
    2016-12-12
  • oracle11数据库安装图文教程

    oracle11数据库安装图文教程

    这篇文章主要为大家详细介绍了oracle11数据库安装图文教程,具有一定的参考价值,感兴趣的小伙伴们可以参考一下
    2017-02-02

最新评论