批量插入
1. 批量執(zhí)行SQL語句
當(dāng)需要成批插入或者更新記錄時,可以采用Java的批量更新機制,這一機制允許多條語句一次性提交給數(shù)據(jù)庫批量處理。通常情況下比單獨提交處理更有效率
JDBC的批量處理語句包括下面三個方法:
- addBatch(String):添加需要批量處理的SQL語句或是參數(shù);
- executeBatch():執(zhí)行批量處理語句;
- clearBatch():清空緩存的數(shù)據(jù)
通常我們會遇到兩種批量執(zhí)行SQL語句的情況:
- 多條SQL語句的批量處理;
- 一個SQL語句的批量傳參;
2. 高效的批量插入
舉例:向數(shù)據(jù)表中插入20000條數(shù)據(jù)
數(shù)據(jù)庫中提供一個goods表。創(chuàng)建如下:
1
2
3
4
|
CREATE TABLE goods( id INT PRIMARY KEY AUTO_INCREMENT, NAME VARCHAR (20) ); |
實現(xiàn)層次一:使用Statement
1
2
3
4
5
6
|
Connection conn = JDBCUtils.getConnection(); Statement st = conn.createStatement(); for ( int i = 1;i <= 20000;i++){ String sql = "insert into goods(name) values('name_' + " + i + ")" ; st.executeUpdate(sql); } |
實現(xiàn)層次二:使用PreparedStatement
1
2
3
4
5
6
7
8
9
10
11
12
13
14
|
long start = System.currentTimeMillis(); Connection conn = JDBCUtils.getConnection(); String sql = "insert into goods(name)values(?)" ; PreparedStatement ps = conn.prepareStatement(sql); for ( int i = 1;i <= 20000;i++){ ps.setString(1, "name_" + i); ps.executeUpdate(); } long end = System.currentTimeMillis(); System. out .println( "花費的時間為:" + ( end - start));//82340 JDBCUtils.closeResource(conn, ps); |
實現(xiàn)層次三
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
|
/* * 修改1: 使用 addBatch() / executeBatch() / clearBatch() * 修改2:mysql服務(wù)器默認(rèn)是關(guān)閉批處理的,我們需要通過一個參數(shù),讓mysql開啟批處理的支持。 * ?rewriteBatchedStatements= true 寫在配置文件的url后面 * 修改3:使用更新的mysql 驅(qū)動:mysql-connector-java-5.1.37-bin.jar * */ @Test public void testInsert1() throws Exception{ long start = System.currentTimeMillis(); Connection conn = JDBCUtils.getConnection(); String sql = "insert into goods(name)values(?)" ; PreparedStatement ps = conn.prepareStatement(sql); for ( int i = 1;i <= 1000000;i++){ ps.setString(1, "name_" + i); //1.“攢”sql ps.addBatch(); if(i % 500 == 0){ //2.執(zhí)行 ps.executeBatch(); //3.清空 ps.clearBatch(); } } long end = System.currentTimeMillis(); System. out .println( "花費的時間為:" + ( end - start));//20000條:625 //1000000條:14733 JDBCUtils.closeResource(conn, ps); } |
實現(xiàn)層次四
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
|
/* * 層次四:在層次三的基礎(chǔ)上操作 * 使用 Connection 的 setAutoCommit( false ) / commit () */ @Test public void testInsert2() throws Exception{ long start = System.currentTimeMillis(); Connection conn = JDBCUtils.getConnection(); //1.設(shè)置為不自動提交數(shù)據(jù) conn.setAutoCommit( false ); String sql = "insert into goods(name)values(?)" ; PreparedStatement ps = conn.prepareStatement(sql); for ( int i = 1;i <= 1000000;i++){ ps.setString(1, "name_" + i); //1.“攢”sql ps.addBatch(); if(i % 500 == 0){ //2.執(zhí)行 ps.executeBatch(); //3.清空 ps.clearBatch(); } } //2.提交數(shù)據(jù) conn. commit (); long end = System.currentTimeMillis(); System. out .println( "花費的時間為:" + ( end - start));//1000000條:4978 JDBCUtils.closeResource(conn, ps); } |
到此這篇關(guān)于jdbc使用PreparedStatement批量插入數(shù)據(jù)的文章就介紹到這了,更多相關(guān)jdbc使用PreparedStatement批量插入數(shù)據(jù)內(nèi)容請搜索服務(wù)器之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持服務(wù)器之家!
原文鏈接:https://www.cnblogs.com/jyroy/p/14704964.html