JDBC插入百万数据

65 阅读 0 评论 43 点赞

我是靠谱客的博主潇洒奇异果，最近开发中收集的这篇文章主要介绍JDBC插入百万数据，觉得挺不错的，现在分享给大家，希望可以做个参考。

概述

 1 long startTime=System.currentTimeMillis();
 2         
 3         Connection conn=null;
 4         try{
 5             conn=getConnection();
 6             conn.setAutoCommit(false);
 7             
 8             PreparedStatement stmt=conn.prepareStatement("INSERT INTO product_tmp VALUES (?,?,?,?)");
 9             System.out.println("数据大小："+datas.size());        //1000000
10 
11             int num=0;
12             for(Values v:datas){
13                 num++;
14                 stmt.setInt(1, v.getId());
15                 stmt.setString(2, v.getStr1());
16                 stmt.setString(3, v.getStr2());
17                 stmt.setString(4, v.getStr3());
18                 stmt.addBatch();
19                 //注意: 每5万，提交一次;这里不能一次提交过多的数据,我测试了一下，6万5000是极限，6万6000就会出问题，插入的数据量不对。
20                 if(num>50000){
21                     stmt.executeBatch();
22                     conn.commit();
23                     num=0;
24                 }
25             }
26             stmt.executeBatch();
27             conn.commit();
28         }catch(Exception e){
29             conn.rollback();
30             e.printStackTrace();
31         }finally{
32             closeConnection(conn);
33             long endTime=System.currentTimeMillis();
34             System.out.println("方法执行时间："+(endTime-startTime)+"ms");
35         }