PostgreSQL upset解决在插入过程中重复数据冲突

发布时间:2017-7-1 11:08:22编辑:www.fx114.net 分享查询网我要评论
本篇文章主要介绍了"PostgreSQL upset解决在插入过程中重复数据冲突 ",主要涉及到PostgreSQL upset解决在插入过程中重复数据冲突 方面的内容,对于PostgreSQL upset解决在插入过程中重复数据冲突 感兴趣的同学可以参考一下。

关于重复行问题:

  在SQL Server中则可以自动排出重复行,不需要处理。在Oracle中经常遇到upsert语法,来排出冲突行。在PostgreSQL中,也需要手动排出重复行,否则会爆出错误,upsert用法如下:

  

    WITH upsert AS (         UPDATE TEST AS a         SET         updatetime=b.updatetime, msec=b.msec         FROM TEMP_WRITEEVTUPDATETMSTAMP AS b         WHERE a.deviceid=b.deviceid AND a.eventtype=b.eventtype         RETURNING a.deviceid,a.eventtype     )     INSERT INTO TEST     SELECT b.deviceid, b.eventtype, b.updatetime,b.msec     FROM TEMP_WRITEEVTUPDATETMSTAMP b     WHERE NOT EXISTS (SELECT 1 FROM upsert as a WHERE a.deviceid=b.deviceid AND a.eventtype=b.eventtype);    

  经过测试,发现这种方法效率很低,于是将upsert过程拆分为两个过程,先insert不重复的数据,然后再执行update:

  

    INSERT INTO TEST     Select b.*     from TEMP_WRITEEVTUPDATETMSTAMP b, (select deviceid, eventtype, max(ctid) max_ctid from TEMP_WRITEEVTUPDATETMSTAMP group by deviceid, eventtype) c     where (b.deviceid = c.deviceid and b.eventtype = c.eventtype and b.ctid = c.max_ctid) and NOT EXISTS (SELECT 1 FROM TEST as a WHERE a.deviceid=b.deviceid AND a.eventtype=b.even     UPDATE TEST AS a     SET     updatetime=b.updatetime, msec=b.msec     FROM TEMP_WRITEEVTUPDATETMSTAMP AS b     WHERE a.deviceid=b.deviceid AND a.eventtype=b.eventtype;

当时在存储过程中大量使用该方法来去除重复数据的插入,但是最后发现还有更好的方法来处理,upsert:

   INSERT INTO TEST     select * from TEMP_WRITEEVTUPDATETMSTAMP on conflict pk_test_deviceid_eventtype do update set updatetime = excluded.updatetime, msec = excluded.msec;


上一篇:Squirrel的安装(windows上Phoneix可视化工具)
下一篇:主机屋 ubuntu 14安装nginx

相关文章

相关评论

本站评论功能暂时取消,后续此功能例行通知。

一、不得利用本站危害国家安全、泄露国家秘密,不得侵犯国家社会集体的和公民的合法权益,不得利用本站制作、复制和传播不法有害信息!

二、互相尊重,对自己的言论和行为负责。

好贷网好贷款