博客
关于我
mysql中一条insert语句批量插入多条记录
阅读量:689 次
发布时间:2019-03-17

本文共 1401 字,大约阅读时间需要 4 分钟。

最近在项目中需要对数据进行插表操作,由于数据量较大,我们不能使用普通的insert into语句,因为它会引发for循环,而这对公司部门产品流量大、对性能要求高的场景来说是不是太迟缓了。于是我决定采用批量插入的方式来优化数据库操作。

早期的代码大多使用如下方式:

insert into user_info (user_id, user_name, status, years) values (123, '你好', 1, 15);

或者:

insert into user_info set user_id=123, user_name='你好', status=1, years=15;

虽然这种单句插入的方式在批量处理时也需要循环实现:

for(int i=0;i

其中strSql就是:

insert into user_info (user_id, user_name, status, years) values (123, '你好', 1, 15);

这种方法虽然能实现批量插入,但在大规模数据处理中效率仍不够理想。经过研究和实践,我们最终选择了以下批量SQL实现方案:

insert into user_info (user_id, user_name, status, years) values (123, '你好', 1, 15), (456, '你好', 2, 16);

在实际项目中,插表操作可能会遇到以下情况:当我们不知道需要插入的数据是否已经存在于表中时,可能会导致唯一索引冲突或其他数据库约束问题。这时候就需要合理利用ON DUPLICATE KEY UPDATEREPLACE等功能来解决。

首先分析两种语句的作用和适用场景:

  • ON DUPLICATE KEY UPDATE:在插入记录时,如果发现唯一索引或主键重复,就执行指定的更新操作;如果没有冲突,就直接插入新记录。这种方法能够保留原记录的其他字段值,只更新指定的字段。

    示例:

    insert into user_info (user_id, user_name, status, years) values (123, '你好', 1, 15) on duplicate key update user_name = values(user_name);

    这意味着当user_id冲突时,会保留主键user_id,更改其他字段user_name,而其他字段值会继承原记录的值。

  • REPLACE:在插入记录时,如果发现唯一索引或主键重复,就删除存在的记录并插入新值;如果没有冲突,就直接插入新记录。这种方法适用于需要清除旧记录并添加新记录的情形,而且可以在REPLACE语句中省略into字眼。

    示例:

    replace into user_info (user_id, user_name, status, years) values (123, '你好', 1, 15);

    user_id冲突时,会删除原记录并插入新的数据。如果REPLACE语句的字段不完整,系统会自动将缺失字段填充为默认值。

  • 在实际应用中,应根据具体需求选择合适的语句。例如,当主键或唯一索引重复时,REPLACE会彻底删除旧记录并添加新值,但如果需要保留原记录的其他字段值,ON DUPLICATE KEY UPDATE是更好的选择。

    转载地址:http://payhz.baihongyu.com/

    你可能感兴趣的文章
    pandas改变一列值(通过apply)
    查看>>
    Pandas数据分析的环境准备
    查看>>
    Pandas数据可视化怎么做?用实战案例告诉你!
    查看>>
    Pandas数据处理与分析教程:从基础到实战
    查看>>
    Pandas数据结构之DataFrame常见操作
    查看>>
    pandas整合多份csv文件
    查看>>
    pandas某一列转数组list
    查看>>
    Pandas模块,我觉得掌握这些就够用了!
    查看>>
    Pandas玩转文本处理!
    查看>>
    SpringBoot 整合 Mybatis Plus 实现基本CRUD功能
    查看>>
    pandas的to_sql方法中使用if_exists=‘replace‘
    查看>>
    Springboot ppt转pdf——aspose方式
    查看>>
    pandas读取csv编码utf-8报错
    查看>>
    pandas读取parquet报错
    查看>>
    pandas读取数据用来深度学习
    查看>>
    pandas读取文件时,不去掉前面的0 保留原有的数据格式
    查看>>
    Pandas进阶大神!从0到100你只差这篇文章!
    查看>>
    spring5-介绍Spring框架
    查看>>
    pandas,python - 如何在时间序列中选择特定时间
    查看>>
    Spring 框架之 AOP 原理深度剖析
    查看>>