一、背景
- Oracle 數據庫版本信息:
序號 | BANNER |
---|---|
1 | Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production |
2 | PL/SQL Release 11.2.0.4.0 - Production |
3 | CORE 11.2.0.4.0 Production |
4 | TNS for 64-bit Windows: Version 11.2.0.4.0 - Production |
5 | NLSRTL Version 11.2.0.4.0 - Production |
- 現象
採用 Oracle 數據庫進行分頁查詢時 第x
頁 數據和 第x+n
頁 數據存在重複數據,並且存在缺失/丟失數據的現象。
二、數據準備
在復現上述問題時我們需要先準備測試數據(表 AAA 有 A、B 兩列共 33 條數據),腳本如下:
-- 創建測試表並導入數據
CREATE TABLE AAA
(
A NUMBER(10),
B NUMBER(10)
);
INSERT INTO AAA (A, B) VALUES (1, 123);
INSERT INTO AAA (A, B) VALUES (2, 123);
INSERT INTO AAA (A, B) VALUES (3, 123);
INSERT INTO AAA (A, B) VALUES (4, 123);
INSERT INTO AAA (A, B) VALUES (5, 123);
INSERT INTO AAA (A, B) VALUES (6, 123);
INSERT INTO AAA (A, B) VALUES (7, 123);
INSERT INTO AAA (A, B) VALUES (8, 123);
INSERT INTO AAA (A, B) VALUES (9, 123);
INSERT INTO AAA (A, B) VALUES (10, 123);
INSERT INTO AAA (A, B) VALUES (11, 123);
INSERT INTO AAA (A, B) VALUES (12, 123);
INSERT INTO AAA (A, B) VALUES (13, 123);
INSERT INTO AAA (A, B) VALUES (14, 123);
INSERT INTO AAA (A, B) VALUES (15, 123);
INSERT INTO AAA (A, B) VALUES (16, 123);
INSERT INTO AAA (A, B) VALUES (17, 123);
INSERT INTO AAA (A, B) VALUES (18, 1223);
INSERT INTO AAA (A, B) VALUES (19, 123);
INSERT INTO AAA (A, B) VALUES (20, 123);
INSERT INTO AAA (A, B) VALUES (21, 123);
INSERT INTO AAA (A, B) VALUES (22, 123);
INSERT INTO AAA (A, B) VALUES (23, 123);
INSERT INTO AAA (A, B) VALUES (24, 123);
INSERT INTO AAA (A, B) VALUES (25, 123);
INSERT INTO AAA (A, B) VALUES (26, 123);
INSERT INTO AAA (A, B) VALUES (27, 123);
INSERT INTO AAA (A, B) VALUES (28, 123);
INSERT INTO AAA (A, B) VALUES (29, 123);
INSERT INTO AAA (A, B) VALUES (30, 123);
INSERT INTO AAA (A, B) VALUES (31, 123);
INSERT INTO AAA (A, B) VALUES (32, 123);
INSERT INTO AAA (A, B) VALUES (33, 123);
COMMIT;
三、復現問題
使用分頁查詢腳本對每頁進行查詢:
--第一頁
SELECT *
FROM (SELECT T.*, ROWNUM RN
FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
WHERE ROWNUM <= 10)
WHERE RN > 0;
--第二頁
SELECT *
FROM (SELECT T.*, ROWNUM RN
FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
WHERE ROWNUM <= 20)
WHERE RN > 10;
--第三頁
SELECT *
FROM (SELECT T.*, ROWNUM RN
FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
WHERE ROWNUM <= 30)
WHERE RN > 20;
--第四頁
SELECT *
FROM (SELECT T.*, ROWNUM RN
FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
WHERE ROWNUM <= 40)
WHERE RN > 30;
查詢結果如下:
第一頁數據:
第二頁數據:
第三頁數據:
第四頁數據:
仔細觀察每頁的數據,從中可以看到A=17
在第二頁、第三頁、第四頁數據存在重複,A=8
在第一頁、第二頁、第三頁數據存在重複;另外我們還發現數據總量是 33 條數據,因爲存在重複數據,在總量不變得情況下說明有數據丟失。
此外我們發現分頁查詢時我們的排序字段是 B
,並且 B
列中存在大量重複值(不全重複)全重複不會存在我們在這說的問題,在這就不說明了,感興趣的話可以自己試試,將上面的數據 B=1223
改成和其他一樣的就行。
四、產生原因
通過上一步的問題復現,我們發現在分頁時排序字段是 B
列,並且 B
列存在不同值(有大量重複值),通過僞列進行排序分頁後變得不穩定導致,如果 B
列值都一樣,那順序從數據塊中讀取,不會產生上述問題。
五、解決方案
解決方案其他很簡單,只需要將排序字段改成其他非大量重複列即可。