欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

基于mybatis batch实现批量提交大量数据

程序员文章站 2023-10-31 13:06:04
很多人在用 mybatis 或者 通用 mapper 时,经常会问有没有批量插入和批量更新的方法。实际上许多时候没必要用 去实现特别复杂的批量操作。直接通过 mybat...

很多人在用 mybatis 或者 通用 mapper 时,经常会问有没有批量插入和批量更新的方法。

实际上许多时候没必要用 <foreach> 去实现特别复杂的批量操作。直接通过 mybatis 的 batch 方式执行增删改方法即可。

下面是一个批量用法的例子:

在xml文件配置多条参数同时插入:

<insert id="insertbatch2" parametertype="ctas.entity.sharkflt">
   <selectkey keyproperty="recid" order="before" resulttype="long">
   select seq_ctas_shark_flt.nextval as recid from dual
  </selectkey>
   insert into ctas_shark_flt (<include refid="base_column_list"/>) select seq_test.nextval, a.*
   from (
   <foreach collection="list" item="item" index="index" open="" close="" separator="union all">
    select #{item.awbtype,jdbctype=varchar}, #{item.awbpre,jdbctype=varchar},... from dual
 </foreach>
  ) a
 </insert>

在java代码中,oracle中一次执行的sql语句长度是有限制的,如果最后拼出来的sql字符串过长,会导致执行失败,所以java端还要做一个分段处理,参考下面的处理:

list<sharkflt> data = new arraylist<sharkflt>();
     for (tsharkflt f : sharkflts) {
       data.add(getsharkflt(f));
     }
 
    system.out.println(data.size());
     long begintime = system.currenttimemillis();
    system.out.println("开始插入...");
     sqlsessionfactory sqlsessionfactory 
=ctx.getbean(sqlsessionfactory.class);
     sqlsession session = null;
    try {
       session = sqlsessionfactory.opensession(executortype.batch, false);
       int a = 2000;//每次提交2000条
       int loop = (int) math.ceil(data.size() / (double) a);
 
       list<sharkflt> templist = new arraylist<sharkflt>(a);
      int start, stop;
      for (int i = 0; i < loop; i++) {
        templist.clear();
        start = i * a;
        stop = math.min(i * a + a - 1, data.size() - 1);
        system.out.println("range:" + start + " - " + stop);
        for (int j = start; j <= stop; j++) {
           templist.add(data.get(j));
        }
         session.insert("ctas.importer.writer.mybatis.mappper.sharkfltmapper.insertbatch2", templist);
        session.commit();
        session.clearcache();
         system.out.println("已经插入" + (stop + 1) + " 条");
       }
     } catch (exception e) {
       e.printstacktrace();
       session.rollback();
    } finally {
      if (session != null) {
        session.close();
      }
     }
    long endtime = system.currenttimemillis();
    system.out.println("插入完成,耗时 " + (endtime - begintime) + " 毫秒!");

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持。