mybatis批量更新数据三种方法效率对比【Mysql】

忘是亡心i 2022-11-11 13:13 283阅读 0赞

探讨批量更新数据三种写法的效率问题。

实现方式有三种，

1.  用for循环通过循环传过来的参数集合，循环出N条sql，
    
    注意第一种方法要想成功，需要在db链接url后面带一个参数  &allowMultiQueries=true
    
        即：  jdbc:mysql://localhost:3306/mysqlTest?characterEncoding=utf-8&allowMultiQueries=true
    
        
             <update id="updateBatch" parameterType="java.util.List" >
                <foreach collection="list" item="item" index="index" open="" close="" separator=";">
                    update standard_relation
                    <set >
                        <if test="item.standardFromUuid != null" >
                            standard_from_uuid = #{item.standardFromUuid,jdbcType=VARCHAR},
                        </if>
                        <if test="item.standardToUuid != null" >
                            standard_to_uuid = #{item.standardToUuid,jdbcType=VARCHAR},
                        </if>
                        <if test="item.gmtModified != null" >
                            gmt_modified = #{item.gmtModified,jdbcType=TIMESTAMP},
                        </if>
                    </set>
                    where id = #{item.id,jdbcType=BIGINT}
                </foreach>
            </update>
2.  用mysql的case when 条件判断变相的进行批量更新  
    
        
            <update id="updateBatch" parameterType="java.util.List" >
                update standard_relation
                <trim prefix="set" suffixOverrides=",">
                    <trim prefix="standard_from_uuid =case" suffix="end,">
                        <foreach collection="list" item="i" index="index">
                            <if test="i.standardFromUuid!=null">
                                when id=#{i.id} then #{i.standardFromUuid}
                            </if>
                        </foreach>
                    </trim>
                    <trim prefix="standard_to_uuid =case" suffix="end,">
                        <foreach collection="list" item="i" index="index">
                            <if test="i.standardToUuid!=null">
                                when id=#{i.id} then #{i.standardToUuid}
                            </if>
                        </foreach>
                    </trim>
                    <trim prefix="gmt_modified =case" suffix="end,">
                        <foreach collection="list" item="i" index="index">
                            <if test="i.gmtModified!=null">
                                when id=#{i.id} then #{i.gmtModified}
                            </if>
                        </foreach>
                    </trim>
                </trim>
                where
                <foreach collection="list" separator="or" item="i" index="index" >
                    id=#{i.id}
                </foreach>
            </update>
3.  用ON DUPLICATE KEY UPDATE进行批量更新
    
        批量更新第三种方法，用ON DUPLICATE KEY UPDATE
         <insert id="updateBatch" parameterType="java.util.List">
                insert into standard_relation(id,relation_type, standard_from_uuid,
                standard_to_uuid, relation_score, stat,
                last_process_id, is_deleted, gmt_created,
                gmt_modified,relation_desc)VALUES
                <foreach collection="list" item="item" index="index" separator=",">
                    (#{item.id,jdbcType=BIGINT},#{item.relationType,jdbcType=VARCHAR}, #{item.standardFromUuid,jdbcType=VARCHAR},
                    #{item.standardToUuid,jdbcType=VARCHAR}, #{item.relationScore,jdbcType=DECIMAL}, #{item.stat,jdbcType=TINYINT},
                    #{item.lastProcessId,jdbcType=BIGINT}, #{item.isDeleted,jdbcType=TINYINT}, #{item.gmtCreated,jdbcType=TIMESTAMP},
                    #{item.gmtModified,jdbcType=TIMESTAMP},#{item.relationDesc,jdbcType=VARCHAR})
                </foreach>
                ON DUPLICATE KEY UPDATE
                id=VALUES(id),relation_type = VALUES(relation_type),standard_from_uuid = VALUES(standard_from_uuid),standard_to_uuid = VALUES(standard_to_uuid),
                relation_score = VALUES(relation_score),stat = VALUES(stat),last_process_id = VALUES(last_process_id),
                is_deleted = VALUES(is_deleted),gmt_created = VALUES(gmt_created),
                gmt_modified = VALUES(gmt_modified),relation_desc = VALUES(relation_desc)
            </insert>

以下是耗时测试：

@Override
        public void updateStandardRelations() {
            List<StandardRelation> list=standardRelationMapper.selectByStandardUuid("xiemingjieupdate");
            for(StandardRelation tmp:list){
                tmp.setStandardFromUuid(tmp.getStandardFromUuid()+"update");
                tmp.setStandardToUuid(tmp.getStandardToUuid()+"update");
            }
            long begin=System.currentTimeMillis();
            standardRelationManager.updateBatch(list);
            long end=System.currentTimeMillis();
            System.out.print("当前的批量更新的方法用时"+(end-begin)+"ms");
        }

![20190320113412196.png][]

sql语句for循环效率其实相当高的，因为它仅仅有一个循环体，只不过最后update语句比较多，量大了就有可能造成sql阻塞。

case when虽然最后只会有一条更新语句，但是xml中的循环体有点多，每一个case when 都要循环一遍list集合，所以大批量拼sql的时候会比较慢，所以效率问题严重。使用的时候建议分批插入。

duplicate key update可以看出来是最快的，但是一般大公司都禁用，**公司一般都禁止使用replace into和INSERT INTO … ON DUPLICATE KEY UPDATE，这种sql有可能会造成数据丢失和主从上表的自增id值不一致。**而且用这个更新时，记得一定要加上id，而且values（）括号里面放的是数据库字段，不是java对象的属性字段。

![20190320140449848.png][]

根据效率，安全方面综合考虑，选择适合的很重要。

--------------------

![format_png][]

**想要实时关注更多干货好文，扫描下图关注：**

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxNTcwNjU4_size_16_color_FFFFFF_t_70][]

[20190320113412196.png]: /images/20221022/155082e0e7db440695c9dab417dd9e08.png
[20190320140449848.png]: https://img-blog.csdnimg.cn/20190320140449848.png
[format_png]: https://imgconvert.csdnimg.cn/aHR0cHM6Ly9waWMzLnpoaW1nLmNvbS81MC92Mi0wNzVlNzE5M2FmNzZiMmJlM2UwMmEzMDFmYmY5MTUyZl9oZC53ZWJw?x-oss-process=image/format,png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxNTcwNjU4_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20210626102345647.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3FxXzQxNTcwNjU4,size_16,color_FFFFFF,t_70