当前位置:Gxlcms > 数据库问题 > 千万条数据批量插入数据库表

千万条数据批量插入数据库表

时间:2021-07-01 10:21:17 帮助过:9人阅读

java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; import java.util.Date; /** * @Author BlueFire * @Date 2020/4/17 -22:13 */ public class InsertTest { public static void main(String[] args) throws ClassNotFoundException, SQLException { final String url = "jdbc:mysql://127.0.0.1:3306/mooding?autoReconnect=true&useUnicode=true&characterEncoding=utf8&serverTimezone=Asia/Shanghai"; final String name = "com.mysql.jdbc.Driver"; final String user = "root"; final String password = "123456"; Connection conn = null; Class.forName(name); //指定连接类型 conn = DriverManager.getConnection(url, user, password); //获取连接 if (conn != null) { System.out.println("获取连接成功"); insert(conn);//批量插入数据 } else { System.out.println("获取连接失败"); } } public static void insert(Connection conn) { // 开始时间 Long begin = new Date().getTime(); // sql前缀 String prefix = "INSERT INTO t_users (id,t_name,t_password,sex,description,pic_url,school_name,regist_date,remark) VALUES "; try { // 保存sql后缀 StringBuffer suffix = new StringBuffer(); // 设置事务为非自动提交 conn.setAutoCommit(false); // 比起st,pst会更好些 PreparedStatement pst = (PreparedStatement) conn.prepareStatement(""); //准备执行语句 // 外层循环,总提交事务次数 for (int i = 1; i <= 1000; i++) { suffix = new StringBuffer(); // 第j次提交步长 for (int j = 1; j <= 10000; j++) { // 构建SQL后缀 suffix.append("(‘" + System.currentTimeMillis()* j + "‘,‘" + i * j + "‘,‘123456‘" + ",‘男‘" + ",‘教师‘" + ",‘www.bbk.com‘" + ",‘XX大学‘" + ",‘" + "2016-08-12 14:43:26" + "‘,‘备注‘" + "),"); } // 构建完整SQL String sql = prefix + suffix.substring(0, suffix.length() - 1); // 添加执行SQL pst.addBatch(sql); // 执行操作 pst.executeBatch(); // 提交事务 conn.commit(); // 清空上一次添加的数据 suffix = new StringBuffer(); } // 头等连接 pst.close(); conn.close(); } catch (SQLException e) { e.printStackTrace(); } // 结束时间 Long end = new Date().getTime(); // 耗时 System.out.println("1000万条数据插入花费时间 : " + (end - begin) / 1000 + " s"); System.out.println("插入完成"); } }

 

 

志在分享一些学经验和技巧,如有志同道合的朋友可以添加个人微信,绝不推广任何广告,纯属个人交易,广告请勿扰

技术图片

 

千万条数据批量插入数据库表

标签:java   asi   values   nec   style   设置   dstat   ace   开始时间   

人气教程排行