1. Toy模板网首页
  2. > Toy博客

MyBatis的五种批量插入

8月前 作者：谁是黄黄 分类：Toy博客 阅读(46) 违法举报

这篇具有很好参考价值的文章主要介绍了MyBatis的五种批量插入。希望对大家有所帮助。如果存在错误或未考虑完全的地方，请大家不吝赐教，您也可以点击"举报违法"按钮提交疑问。

一.直接循环插入

@RestController
@RequestMapping("/mybatis3/user")
@RequiredArgsConstructor
public class UserController {

    private final IUserService iUserService;

    @GetMapping("/one")
    public Long one(){
       return iUserService.add();
    }
}


  Long add();


@Service
@RequiredArgsConstructor
public class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {

    private final UserMapper userMapper;

    @Override
    public Long add() {

        long start = System.currentTimeMillis();
        for (int i = 0; i < 10000; i++) {
            User user = new User();
            user.setUsername("name"+i);
            user.setPassword("password"+i);
            userMapper.insertUsers(user);
        }
        long end = System.currentTimeMillis();
        System.out.println("耗时："+( end - start ) + "ms");
        return (end-start);
    }
    }



 Integer insertUsers(User user);

 <insert id="insertUsers" >
        insert into user(username,password)
        values (#{username}, #{password})
    </insert>

最终耗时：14s多
mybatis 批量添加,mybatis,mybatis,java,mysql

二.关闭MySql自动提交，手动进行循环插入提交

@RestController
@RequestMapping("/mybatis3/user")
@RequiredArgsConstructor
public class UserController {

    private final IUserService iUserService;

        @GetMapping("/one")
    public Long one(){
       return iUserService.add();
    }
}


 Long add2();


@Service
@RequiredArgsConstructor
public class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {

    private final UserMapper userMapper;

//    手动开启sql的批量提交
    private final   SqlSessionTemplate sqlSessionTemplate;

    @Override
    public Long add2(){
        //关闭自动提交
        SqlSession sqlSession = sqlSessionTemplate.getSqlSessionFactory().openSession(ExecutorType.BATCH, false);
        UserMapper mapper = sqlSession.getMapper(UserMapper.class);
        long start = System.currentTimeMillis();
        for (int i = 0; i < 10000; i++) {
            User user = new User();
            user.setUsername("name"+i);
            user.setPassword("password"+i);
            mapper.insertUsers(user);
        }
        //自动提交SQL
        sqlSession.commit();
        long end = System.currentTimeMillis();
        System.out.println("耗时："+( end - start ) + "ms");
        return (end-start);
    }
    }

平均：0.12s
mybatis 批量添加,mybatis,mybatis,java,mysql

第三种：用List集合的方式插入数据库（推荐）

@RestController
@RequestMapping("/mybatis3/user")
@RequiredArgsConstructor
public class UserController {

    private final IUserService iUserService;

       @GetMapping("/one3")
    public Long one3(){
        return iUserService.add3();
    }
}


  Long add3();


@Service
@RequiredArgsConstructor
public class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {

    private final UserMapper userMapper;

  @Override
    public Long add3(){
        long start = System.currentTimeMillis();
        List<User> userList = new ArrayList<>();
        User user;
        for (int i = 0; i < 10000; i++) {
            user = new User();
            user.setUsername("name"+i);
            user.setPassword("password"+i);
            userList.add(user);
        }
        userMapper.insertUsersThree(userList);
        long end = System.currentTimeMillis();
        System.out.println("耗时："+( end - start ) + "ms");
        return (end-start);
    }
    }


 Integer insertUsersThree(List<User> userList);
 

<insert id="insertUsersThree">
        insert into user(username,password)
        values
        <foreach collection="userList" item="user" separator=",">
            (#{user.username},#{user.password})
        </foreach>
    </insert>

第四种: MyBatis-Plus提供的SaveBatch方法

@RestController
@RequestMapping("/mybatis3/user")
@RequiredArgsConstructor
public class UserController {

    private final IUserService iUserService;

@GetMapping("/one4")
    public Long one4(){
        return iUserService.add4();
    }
}


  Long add4();


@Service
@RequiredArgsConstructor
public class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {

    private final UserMapper userMapper;

@Override
    public Long add4() {
        long start = System.currentTimeMillis();

        List<User> userList= new ArrayList<>();
        User user ;
        for (int i = 0; i < 10000; i++) {
            user = new User();
            user.setUsername("name"+i);
            user.setPassword("password"+i);
            userList.add(user);
        }

        saveBatch(userList);
        long end = System.currentTimeMillis();
        System.out.println("耗时："+( end - start ) + "ms");
        return (end-start);
    }
    }

直接报错：
mybatis 批量添加,mybatis,mybatis,java,mysql
看报错信息：
长串：Servlet.service() for servlet [dispatcherServlet] in context with path [] threw exception [Request processing failed; nested exception is org.springframework.dao.DataIntegrityViolationException: com.huang.mybatis3.mapper.UserMapper.insert (batch index #1) failed. Cause: java.sql.BatchUpdateException: Data truncation: Out of range value for column ‘id’ at row 1
; Data truncation: Out of range value for column ‘id’ at row 1; nested exception is java.sql.BatchUpdateException: Data truncation: Out of range value for column ‘id’ at row 1] with root cause

短串：Data truncation: Out of range value for column ‘id’ at row 1

翻译一下：
mybatis 批量添加,mybatis,mybatis,java,mysql
可以发现就是我们的id超出范围：
mybatis 批量添加,mybatis,mybatis,java,mysql
int类型改为bigint即可

故此我们可以得出一个结论：设置数据库id的时候设置为bigint还是蛮好的哈

平均时间：0.2s
mybatis 批量添加,mybatis,mybatis,java,mysql

第五种 MyBatis-Plus提供的InsertBatchSomeColumn方法（推荐）

InsertBatchSomeColumn方法了解

mybatis 批量添加,mybatis,mybatis,java,mysql
这个类的注解就写的很明白

扩展这个InsertBatchSomeColumn方法
@Slf4j
public class EasySqlInjector extends DefaultSqlInjector {

    @Override
    public List<AbstractMethod> getMethodList(Class<?> mapperClass, TableInfo tableInfo) {
        // 注意：此SQL注入器继承了DefaultSqlInjector(默认注入器)，调用了DefaultSqlInjector的getMethodList方法，保留了mybatis-plus的自带方法
        List<AbstractMethod> methodList = super.getMethodList(mapperClass, tableInfo);
        methodList.add(new InsertBatchSomeColumn(i -> i.getFieldFill() != FieldFill.UPDATE));
        log.info("扩展的getMethodList方法被框架调用了");
        return methodList;
    }
}
扩展的方法注入bean容器
/**
 * @author Stone
 * @date 2023/1/3
 * @apiNote
 */
@Configuration
public class MybatisPlusConfig {
    @Bean
    public  EasySqlInjector sqlInjector(){
        return new EasySqlInjector();
    }
}
创建一个Mapper去实现我们的扩展的飞方法
public interface EasySqlInjectMapper<T> extends BaseMapper<T> {
    /**
     * 批量插入 仅适用于mysql
     *
     * @param entityList 实体列表
     * @return 影响行数
     */
    Integer insertBatchSomeColumn(Collection<T> entityList);
}

业务层


 @Override
    public Long add5() {
        long start = System.currentTimeMillis();

        List<User> userList= new ArrayList<>();
        User user ;
        for (int i = 0; i < 10000; i++) {
            user = new User();
            user.setUsername("name"+i);
            user.setPassword("password"+i);
            userList.add(user);
        }

        userMapper.insertBatchSomeColumn(userList);
        long end = System.currentTimeMillis();
        System.out.println("耗时："+( end - start ) + "ms");
        return (end-start);
    }

耗时： 0.2 s
mybatis 批量添加,mybatis,mybatis,java,mysql文章来源地址https://www.toymoban.com/news/detail-840298.html

到了这里，关于MyBatis的五种批量插入的文章就介绍完了。如果您还想了解更多内容，请在右上角搜索TOY模板网以前的文章或继续浏览下面的相关文章，希望大家以后多多支持TOY模板网！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处： 如若内容造成侵权/违法违规/事实不符，请点击违法举报进行投诉反馈，一经查实，立即删除！

分享到：
领支付宝红包 赞助服务器费用

相关文章

  • Mybatis批量插入方式有哪些

    MyBatis批量插入有多种写法，最后博主总结一些常见的批量插入写法供大家参考 使用XML配置文件进行批量插入：在XML映射文件中使用 insert 标签，并通过 foreach 标签迭代批量数据，然后在SQL语句中使用 VALUES 。 使用Java注解进行批量插入：在实体类上使用 @Insert 注解，并

    2024年02月11日
    浏览(44)

  • Mybatis批量插入/更新性能优化思路

            最近在做数据写入服务的性能优化，主要是基于Mybatis-Plus实现一套批量写数据的服务，不过该服务是支持整个平台所有需要持久化的业务实体。所以这种服务不仅仅有insert操作还有update的操作。根据以往的MySQL数据库写入经验，主要总结了两套批量插入、批量插入

    2024年04月25日
    浏览(42)
  • Mybatis 中传入List实现 批量插入、批量更新、批量删除

    Mybatis 中传入List实现 批量插入、批量更新、批量删除

    个人收藏使用 文章来自Mybatis 中传入List实现 批量插入、批量更新、批量删除 - chelsey3tsf - 博客园 (cnblogs.com) 1. 批量插入 ： Mapper层： 对应的mapper.xml： 如果List数据量比较大，可以考虑将List分批次插入 2. 批量更新： 批量更新只提供更新单个字段的，因为更新多个字段无论哪种

    2024年02月11日
    浏览(58)
  • mybatis-plus 批量插入示例

    mybatis-plus 批量插入示例

    正常我们使用mybatis-plus插入的时候，首先想到的是  saveBatch 方法，不过看了下打印出来的sql和底层代码，才发现它并不是真正的批量插入。     实现层   ServiceImpl 中的代码为 通过监控控制台发现，它只是循环每1000条去插入，效率非常低。   参考网友的文章，找到一个支

    2024年02月15日
    浏览(40)
  • Mybatis-plus---的批量插入

    Mybatis-plus---的批量插入

    批量插入 一、继承IService（伪批量） 二、insertBatchSomeColumn Mybatis-plus很强，为我们诞生了极简CURD操作，但对于数据批量操作，显然默认提供的insert方法是不够看的了，于是它和它来了!!! Mybatis-plus提供的两种插入方式          继承IService（伪批量）         insertBatchSo

    2024年02月16日
    浏览(48)
  • MyBatis 批量插入数据的 3 种方法！

    MyBatis 批量插入数据的 3 种方法！

    数据库的最终效果如下： 接下来我们将使用 Spring Boot 项目，批量插入 10W 条数据来分别测试各个方法的执行时间。​ 循环单次插入的（测试）核心代码如下： 运行以上程序，花费了 88574 毫秒，如下图所示： MP 批量插入功能核心实现类有三个：UserController（控制器）、UserS

    2024年02月07日
    浏览(43)
  • 批量插入或更新数据(MyBatis-plus框架)

    批量插入或更新数据(MyBatis-plus框架)

    目录 1.场景说明 2.DUPLICATE 和REPLACE比较 3.批量插入或者更新(两种方式) 方式一：mybatis-plus的saveOrUpdateBatch方法 问题：如果操作类集成了基础类，比如封装了BaseEntity去集成，那么这样使用会出问题 方式二：on duplicate key (推荐) 4.注意 5.常见问题  插入数据时，我们经常会遇到这

    2024年02月04日
    浏览(88)
  • MyBatis批量插入数据优化,增加一个参数，效率提升百倍

    MyBatis批量插入数据优化,增加一个参数，效率提升百倍

    项目中进行接口压测，发现批量插入的速度有点超出预期，感觉很奇怪，经过定位后发现mybatise-plus批量保存的处理十分缓慢，使用的是saveBatch方法，这点有点想不通。于是就进行了相关内容分析。 根据mybatise-plus中saveBatch的方法进行源码查看:   继续跟踪逻辑，从代码上看，

    2024年02月15日
    浏览(45)

  • MyBatis-plus的批量插入方式对比分析

      【摘要】Mybatis批量插入一直是开发者重点关注的问题，本文列举了Mybatis的五种插入方式进行对比分析，验证了五种批量插入的方式的优先级。   略。 1、编写UserService服务类，测试一万条数据的耗时情况： 2、编写UserMapper接口 3、编写UserMapper.xml文件 4、进行单元测试

    2024年02月07日
    浏览(56)

  • SpringBoot+MyBatis批量插入数据的三种方式

    最近导入表格数据时需要同时插入修改大量数据，研究了一下有三种实现方式 1、用for循环调用sql插入数据 这种方式插入大量数据时，效率非常底下，不推荐 2、利用mybatis的foreach来实现循环插入 这种方式插入大量数据时，好处是不用频繁访问数据库，一条sql搞定，效率比较

    2024年02月16日
    浏览(42)

觉得文章有用就打赏一下文章作者

支付宝扫一扫打赏

博客赞助

微信扫一扫打赏

请作者喝杯咖啡吧~博客赞助

支付宝扫一扫领取红包，优惠每天领

二维码1

领取红包

二维码2

领红包