标签:java asi values nec style 设置 dstat ace 开始时间
通过最简单的方式将批量数据插入数据库中,千万条记录导入时间用了100s,贴出来代码供大家参考学习。
import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.SQLException; import java.util.Date; /** * @Author BlueFire * @Date 2020/4/17 -22:13 */ public class InsertTest { public static void main(String[] args) throws ClassNotFoundException, SQLException { final String url = "jdbc:mysql://127.0.0.1:3306/mooding?autoReconnect=true&useUnicode=true&characterEncoding=utf8&serverTimezone=Asia/Shanghai"; final String name = "com.mysql.jdbc.Driver"; final String user = "root"; final String password = "123456"; Connection conn = null; Class.forName(name); //指定连接类型 conn = DriverManager.getConnection(url, user, password); //获取连接 if (conn != null) { System.out.println("获取连接成功"); insert(conn);//批量插入数据 } else { System.out.println("获取连接失败"); } } public static void insert(Connection conn) { // 开始时间 Long begin = new Date().getTime(); // sql前缀 String prefix = "INSERT INTO t_users (id,t_name,t_password,sex,description,pic_url,school_name,regist_date,remark) VALUES "; try { // 保存sql后缀 StringBuffer suffix = new StringBuffer(); // 设置事务为非自动提交 conn.setAutoCommit(false); // 比起st,pst会更好些 PreparedStatement pst = (PreparedStatement) conn.prepareStatement(""); //准备执行语句 // 外层循环,总提交事务次数 for (int i = 1; i <= 1000; i++) { suffix = new StringBuffer(); // 第j次提交步长 for (int j = 1; j <= 10000; j++) { // 构建SQL后缀 suffix.append("(‘" + System.currentTimeMillis()* j + "‘,‘" + i * j + "‘,‘123456‘" + ",‘男‘" + ",‘教师‘" + ",‘www.bbk.com‘" + ",‘XX大学‘" + ",‘" + "2016-08-12 14:43:26" + "‘,‘备注‘" + "),"); } // 构建完整SQL String sql = prefix + suffix.substring(0, suffix.length() - 1); // 添加执行SQL pst.addBatch(sql); // 执行操作 pst.executeBatch(); // 提交事务 conn.commit(); // 清空上一次添加的数据 suffix = new StringBuffer(); } // 头等连接 pst.close(); conn.close(); } catch (SQLException e) { e.printStackTrace(); } // 结束时间 Long end = new Date().getTime(); // 耗时 System.out.println("1000万条数据插入花费时间 : " + (end - begin) / 1000 + " s"); System.out.println("插入完成"); } }
志在分享一些学经验和技巧,如有志同道合的朋友可以添加个人微信,绝不推广任何广告,纯属个人交易,广告请勿扰
标签:java asi values nec style 设置 dstat ace 开始时间
原文地址:https://www.cnblogs.com/d102601560/p/12725510.html