在各数据库中使用 MERGE 实现插入避重 SQL

MERGE实现插入避重操作

前言

MERGE是一种在数据库管理系统中用于合并（插入、更新或删除）数据的SQL语句。它允许根据指定的条件将数据从一个表合并到另一个表中，同时避免重复插入或更新数据。

MERGE语句通常由以下几个关键字和子句组成：

• MERGE：关键字指示要执行合并操作。

• INTO：指定目标表，即要将数据合并到其中的表。

• USING：指定源表，即提供要合并的数据的表。

• ON：指定用于匹配目标表和源表的条件。通常，使用一组或多组字段进行条件匹配。

• WHEN MATCHED THEN UPDATE：当目标表和源表匹配时，指定要执行的更新操作。可以使用SET子句来更新目标表的列。

• WHEN NOT MATCHED THEN INSERT：当目标表和源表不匹配时，指定要执行的插入操作。可以提供要插入的值，可以是源表中的列值或常量。

• WHEN NOT MATCHED BY SOURCE THEN DELETE：可选子句，用于在源表中没有匹配时执行删除操作。

MERGE语句的执行过程如下：

从源表中获取要合并的数据。
根据ON子句中指定的条件，将目标表和源表进行匹配。
如果匹配成功（即目标表和源表的条件匹配），则执行指定的更新操作。
如果没有匹配成功（即目标表和源表的条件不匹配），则执行指定的插入操作。
可选地，如果源表中存在记录而目标表中没有匹配记录，可以执行删除操作。

MERGE语句的使用场景包括在一个表中合并来自另一个表的数据，根据条件更新或插入数据，以及避免重复插入重复的数据。
需要注意的是，不同的数据库管理系统可能在MERGE语句的语法和用法上有所差异，因此在具体使用时请参考相关数据库的官方文档以确保正确使用。

SQL语句

MySQL

MERGE INTO table_name AS target
USING (SELECT value1, value2 FROM dual) AS source
ON (target.field1 = source.value1 AND target.field2 = source.value2)
WHEN NOT MATCHED THEN
    INSERT (field1, field2) VALUES (source.value1, source.value2);

Oracle

MERGE INTO table_name target
USING (SELECT value1, value2 FROM dual) source
ON (target.field1 = source.value1 AND target.field2 = source.value2)
WHEN NOT MATCHED THEN
    INSERT (field1, field2) VALUES (source.value1, source.value2);

SQL Server

MERGE INTO table_name AS target
USING (SELECT value1, value2) AS source
ON (target.field1 = source.value1 AND target.field2 = source.value2)
WHEN NOT MATCHED THEN
    INSERT (field1, field2) VALUES (source.value1, source.value2);

PostgreSQL

INSERT INTO table_name (field1, field2)
SELECT value1, value2
FROM (VALUES (value1, value2)) AS source (value1, value2)
WHERE NOT EXISTS (
    SELECT 1 FROM table_name
    WHERE field1 = source.value1 AND field2 = source.value2
);

在上述示例中，table_name 是目标表的名称，field1、field2 是要进行比较的字段，value1、value2 是要插入的新记录的值。使用 MERGE 语句，你可以根据指定的字段比较是否存在匹配的记录，如果不存在则执行插入操作。

各数据库支持 MERGE 的版本

MERGE语句在许多主流数据库管理系统（DBMS）中都得到了支持，但具体的语法和用法可能会因DBMS的不同而有所差异。下面是一些支持MERGE语句的常见数据库：

• MySQL：MySQL从版本8.0开始支持MERGE语句。它用于在目标表中执行插入、更新或删除操作。

• Oracle：Oracle数据库支持MERGE语句，它被用来在目标表中根据指定的条件执行插入、更新或删除操作。

• Microsoft SQL Server：SQL Server也支持MERGE语句，用于在目标表中执行插入、更新或删除操作。语法和用法与Oracle的MERGE语句相似。

• PostgreSQL：PostgreSQL也支持MERGE语句，称为"UPSERT"操作（合并插入/更新）。通过使用MERGE语句，可以根据指定的条件在目标表中执行插入或更新操作。

请注意，每个数据库的语法略有不同，上述示例提供了一般的语法形式，具体使用时可能需要根据你的数据库和表结构进行调整。同时，某些数据库可能不支持 MERGE 语句，你可以使用其他方法实现相同的功能，如使用 INSERT … ON CONFLICT (PostgreSQL) 或 REPLACE INTO (MySQL) 等。

Mybatis 实践

MySQL

Oracle

SQL server

    <insert id="batchSaveSql">
        MERGE INTO table_name AS t1
        USING (
        <foreach collection="list" item="item" index="index" separator="UNION ALL">
            SELECT
            #{item.field1} AS field1, #{item.field2} AS field2, #{item.field3} AS field3, #{item.field4} AS field4
        </foreach>
        ) AS t2 ON (t1.field1 = t2.field1 AND t1.field2 = t2.field2)
        WHEN NOT MATCHED THEN
        INSERT (field1, field2, field3, field4)
        VALUES (t2.field1, t2.field2, t2.field3, t2.field4);
    </insert>

在上述示例中，table_name 是目标表的名称，field1、field2 、field3、field4是表里的字段，根据field1和field2插入去重，如果field1和field2同时存在则不插入。

PostgreSQL

遇到的问题

MySQL

You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'MERGE INTO code_info AS t1 USING ( SELECT ’ at line 1]
如果在项目中出现这个异常说明MySQL版本还不支持MERGE命令。