本自轉自:Mysql批量更新的三種方式
前言
批量插入由於mysql的VALUES原生支持,使用較爲便利。
批量更新的寫法一般有三種,在更新數量較少的情況下,前兩種性能不相上下。但是在更新字段增加,更新條數較多(500以上)建議使用第三種寫法。
- 常規寫法,拼接多個單條更新語句。
CASE...WHEN...
寫法JOIN
寫法
Batch Update
spring/mybatis/JDBI都支持這種批量更新方式。
這種更新方式需要設置jdbc連接的參數:
allowMultiQueries=true
# 完整url舉例
jdbc.url=jdbc:mysql://localhost:3306/db_name?useUnicode=true&characterEncoding=utf8&allowMultiQueries=true
具體實現以Spring的JdbcTemplate
爲例。
batchUpdate
的主要代碼如下圖:
首先檢查了jdbc連接是否支持批量更新操作,如果allowMultiQueries
值爲false
,將被攔截。
然後拼接了SQL語句,拼接代碼如下:
直接用分號拼接。
CASE WHEN
示例:
UPDATE test
SET code = (
CASE
WHEN id = 1 THEN 11
WHEN id = 2 THEN 22
WHEN id = 3 THEN 33
END
) WHERE id IN (1,2,3);
注意:CASE WHEN
一定要和WHERE
語句一起使用,否則UPDATE會遍歷和更新數據庫中所有的行。會把未出現在WHEN
中的數據都更新成null
,如果code
列設置爲NOT NULL
則會報錯,否則會置爲NULL或者默認值。
JOIN
這種寫法不太常見。
UPDATE `test` a JOIN
(
SELECT 1 AS id, 11 AS code, 'holy' AS name
UNION
SELECT 2 AS id, 22 AS code, 'shit' AS name
) b USING(id, code)
SET a.name=b.name;
上述SQL要表達的更新語義是:將id=1且code=11的name更新爲'holy',將id=2且code=22的name更新爲'shit'。
注意,條件字段必須放在USING
中
性能對比
RC隔離級別
更新條數小(一般小於500條),CASE WHEN
和JOIN
優於UDPATE
。
更新條數較大(千級別),CASE WHEN
效率迅速下降,UPDATE
居中,推薦使用JOIN
寫法
RR隔離級別
JOIN
性能優於CASE WHEN
,CASE WHEN
優於UPDATE
。
RC級別下的測試數據
數據庫實例規格:8核,20G內存,100G硬盤
隔離級別:READ-COMMITTED
連接方式:JDBC
更新方式 | 更新300條記錄平均耗時 | 更新3000條記錄平均耗時 |
---|---|---|
UPDATE | 230ms | 560ms |
CASE WHEN | 110ms | 1170ms |
JOIN | 100ms | 320ms |
本自轉自:MySql中4種批量更新的方法
mysql 批量更新共有以下四種辦法
1、.replace into 批量更新
replace into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y');
例子:
replace into book (
'Id',
'Author',
'CreatedTime',
'UpdatedTime'
) values (
1,
'張飛',
'2016-12-12 12:20',
'2016-12-12 12:20'
),(
2,
'關羽',
'2016-12-12 12:20',
'2016-12-12 12:20');
2、insert into ...on duplicate key update批量更新
insert into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y') on duplicate key update dr=values(dr);
例子:
insert into book
(`Id`,`Author`,`CreatedTime`,`UpdatedTime`)
values
(1,'張飛2','2017-12-12 12:20','2017-12-12 12:20'),
(2,'關羽2','2017-12-12 12:20','2017-12-12 12:20')
on duplicate key update
Author=values(Author),
CreatedTime=values(CreatedTime),
UpdatedTime=values(UpdatedTime);
replace into 和 insert into on duplicate key update的不同在於:
- replace into 操作本質是對重複的記錄先delete 後insert,如果更新的字段不全會將缺失的字段置爲缺省值,用這個要悠着點否則不小心清空大量數據可不是鬧着玩的。
- insert into 則是隻update重複記錄,不會改變其它字段。
3.創建臨時表,先更新臨時表,然後從臨時表中update
create temporary table tmp(id int(4) primary key,dr varchar(50));
insert into tmp values (0,'gone'), (1,'xx'),...(m,'yy');
update test_tbl, tmp set test_tbl.dr=tmp.dr where test_tbl.id=tmp.id;
注意:這種方法需要用戶有temporary 表的create 權限。
4、使用mysql 自帶的語句構建批量更新
mysql 實現批量 可以用點小技巧來實現:
UPDATE yoiurtable
SET dingdan = CASE id
WHEN 1 THEN 3
WHEN 2 THEN 4
WHEN 3 THEN 5
END
WHERE id IN (1,2,3)
這句sql 的意思是,更新dingdan 字段,如果id=1 則dingdan 的值爲3,如果id=2 則dingdan 的值爲4……
where部分不影響代碼的執行,但是會提高sql執行的效率。確保sql語句僅執行需要修改的行數,這裏只有3條數據進行更新,而where子句確保只有3行數據執行。
例子:
UPDATE book
SET Author = CASE id
WHEN 1 THEN '黃飛鴻'
WHEN 2 THEN '方世玉'
WHEN 3 THEN '洪熙官'
END
WHERE id IN (1,2,3)
如果更新多個值的話,只需要稍加修改:
UPDATE categories
SET dingdan = CASE id
WHEN 1 THEN 3
WHEN 2 THEN 4
WHEN 3 THEN 5
END,
title = CASE id
WHEN 1 THEN 'New Title 1'
WHEN 2 THEN 'New Title 2'
WHEN 3 THEN 'New Title 3'
END
WHERE id IN (1,2,3)
例子:
UPDATE book
SET Author = CASE id
WHEN 1 THEN '黃飛鴻2'
WHEN 2 THEN '方世玉2'
WHEN 3 THEN '洪熙官2'
END,
Code = CASE id
WHEN 1 THEN 'HFH2'
WHEN 2 THEN 'FSY2'
WHEN 3 THEN 'HXG2'
END
WHERE id IN (1,2,3)
具體的MyBatis代碼如下:
<update id="update" parameterType="java.util.List">
UPDATE dic_col_display
SET column_code = CASE id
<foreach collection="list" item="item" index="index" open="" separator="" close="">
WHEN #{item.id} THEN #{item.column_code}
</foreach>
END,
column_desc = CASE id
<foreach collection="list" item="item" index="index" open="" separator="" close="">
WHEN #{item.id} THEN #{item.column_desc}
</foreach>
END,
modify_user_id = CASE id
<foreach collection="list" item="item" index="index" open="" separator="" close="">
WHEN #{item.id} THEN #{item.modify_user_id}
</foreach>
END,
modify_user_name = CASE id
<foreach collection="list" item="item" index="index" open="" separator="" close="">
WHEN #{item.id} THEN #{item.modify_user_name}
</foreach>
END,
modify_date = NOW()
WHERE
id in
<foreach collection="list" item="item" index="index" open="(" separator="," close=")">
#{item.id}
</foreach>
</update>