Mysql學習---Mysql批量更新的三種方式

本自轉自:Mysql批量更新的三種方式

前言

批量插入由於mysql的VALUES原生支持,使用較爲便利。

批量更新的寫法一般有三種,在更新數量較少的情況下,前兩種性能不相上下。但是在更新字段增加,更新條數較多(500以上)建議使用第三種寫法。

  • 常規寫法,拼接多個單條更新語句。
  • CASE...WHEN...寫法
  • JOIN寫法

Batch Update

spring/mybatis/JDBI都支持這種批量更新方式。
這種更新方式需要設置jdbc連接的參數:

allowMultiQueries=true
# 完整url舉例
jdbc.url=jdbc:mysql://localhost:3306/db_name?useUnicode=true&characterEncoding=utf8&allowMultiQueries=true


具體實現以Spring的JdbcTemplate爲例。
batchUpdate的主要代碼如下圖:

首先檢查了jdbc連接是否支持批量更新操作,如果allowMultiQueries值爲false,將被攔截。
然後拼接了SQL語句,拼接代碼如下:

直接用分號拼接。

CASE WHEN

示例:

UPDATE test
SET code = (
CASE 
WHEN id = 1 THEN 11
WHEN id = 2 THEN 22
WHEN id = 3 THEN 33
END
) WHERE id IN (1,2,3);


注意:CASE WHEN一定要和WHERE語句一起使用,否則UPDATE會遍歷和更新數據庫中所有的行。會把未出現在WHEN中的數據都更新成null,如果code列設置爲NOT NULL則會報錯,否則會置爲NULL或者默認值。

JOIN

這種寫法不太常見。

UPDATE `test` a JOIN 
(
SELECT 1 AS id, 11 AS code, 'holy' AS name
UNION 
SELECT 2 AS id, 22 AS code, 'shit' AS name
) b USING(id, code)
SET a.name=b.name;


上述SQL要表達的更新語義是:將id=1且code=11的name更新爲'holy',將id=2且code=22的name更新爲'shit'。
注意,條件字段必須放在USING

性能對比

RC隔離級別

更新條數小(一般小於500條),CASE WHENJOIN優於UDPATE
更新條數較大(千級別),CASE WHEN效率迅速下降,UPDATE居中,推薦使用JOIN寫法

RR隔離級別

JOIN性能優於CASE WHENCASE WHEN優於UPDATE

RC級別下的測試數據

數據庫實例規格:8核,20G內存,100G硬盤
隔離級別:READ-COMMITTED
連接方式:JDBC

更新方式 更新300條記錄平均耗時 更新3000條記錄平均耗時
UPDATE 230ms 560ms
CASE WHEN 110ms 1170ms
JOIN 100ms 320ms

本自轉自:MySql中4種批量更新的方法

mysql 批量更新共有以下四種辦法
1、.replace into 批量更新

replace into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y');

例子

replace into book (
    'Id',
    'Author',
    'CreatedTime',
    'UpdatedTime'
) values (
    1,
    '張飛',
    '2016-12-12 12:20',
    '2016-12-12 12:20'
),(
    2,
    '關羽',
    '2016-12-12 12:20',
    '2016-12-12 12:20');

2、insert into ...on duplicate key update批量更新

insert into test_tbl (id,dr) values (1,'2'),(2,'3'),...(x,'y') on duplicate key update dr=values(dr);

例子

insert into book 
(`Id`,`Author`,`CreatedTime`,`UpdatedTime`) 
values 
(1,'張飛2','2017-12-12 12:20','2017-12-12 12:20'),
(2,'關羽2','2017-12-12 12:20','2017-12-12 12:20') 
on duplicate key update 
Author=values(Author),
CreatedTime=values(CreatedTime),
UpdatedTime=values(UpdatedTime);

replace into  和 insert into on duplicate key update的不同在於:

  • replace into 操作本質是對重複的記錄先delete 後insert,如果更新的字段不全會將缺失的字段置爲缺省值,用這個要悠着點否則不小心清空大量數據可不是鬧着玩的。
  • insert into 則是隻update重複記錄,不會改變其它字段。

3.創建臨時表,先更新臨時表,然後從臨時表中update

create temporary table tmp(id int(4) primary key,dr varchar(50));
 insert into tmp values  (0,'gone'), (1,'xx'),...(m,'yy');
 update test_tbl, tmp set test_tbl.dr=tmp.dr where test_tbl.id=tmp.id;

注意:這種方法需要用戶有temporary 表的create 權限。

4、使用mysql 自帶的語句構建批量更新
    mysql 實現批量 可以用點小技巧來實現:

UPDATE yoiurtable
SET dingdan = CASE id 
    WHEN 1 THEN 3 
    WHEN 2 THEN 4 
    WHEN 3 THEN 5 
END
WHERE id IN (1,2,3)

這句sql 的意思是,更新dingdan 字段,如果id=1 則dingdan 的值爲3,如果id=2 則dingdan 的值爲4……
where部分不影響代碼的執行,但是會提高sql執行的效率。確保sql語句僅執行需要修改的行數,這裏只有3條數據進行更新,而where子句確保只有3行數據執行。   
例子

UPDATE book
SET Author = CASE id 
    WHEN 1 THEN '黃飛鴻' 
    WHEN 2 THEN '方世玉'
    WHEN 3 THEN '洪熙官'
END
WHERE id IN (1,2,3)

如果更新多個值的話,只需要稍加修改:


UPDATE categories      
SET dingdan = CASE id 
    WHEN 1 THEN 3 
    WHEN 2 THEN 4 
    WHEN 3 THEN 5 
END, 
title = CASE id 
    WHEN 1 THEN 'New Title 1'
    WHEN 2 THEN 'New Title 2'
    WHEN 3 THEN 'New Title 3'
END
WHERE id IN (1,2,3)

例子

UPDATE book
SET Author = CASE id 
    WHEN 1 THEN '黃飛鴻2' 
    WHEN 2 THEN '方世玉2'
    WHEN 3 THEN '洪熙官2'
END,
Code = CASE id 
    WHEN 1 THEN 'HFH2' 
    WHEN 2 THEN 'FSY2'
    WHEN 3 THEN 'HXG2'
END
WHERE id IN (1,2,3)

具體的MyBatis代碼如下:


<update id="update" parameterType="java.util.List">
    UPDATE dic_col_display
	SET column_code = CASE id
	<foreach collection="list" item="item" index="index" open="" separator="" close="">
		WHEN #{item.id} THEN #{item.column_code} 
	</foreach>
	END,
	column_desc = CASE id
	<foreach collection="list" item="item" index="index" open="" separator="" close="">
		WHEN #{item.id} THEN #{item.column_desc} 
	</foreach>
	END,
	modify_user_id = CASE id
	<foreach collection="list" item="item" index="index" open="" separator="" close="">
		WHEN #{item.id} THEN #{item.modify_user_id} 
	</foreach>
	END,
	modify_user_name = CASE id
	<foreach collection="list" item="item" index="index" open="" separator="" close="">
		WHEN #{item.id} THEN #{item.modify_user_name} 
	</foreach>
	END,
	modify_date = NOW()
	WHERE
	  id in
	  <foreach collection="list" item="item" index="index" open="(" separator="," close=")">
		  #{item.id} 
	  </foreach>
</update>
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章