Oracle分頁查詢出現重複數據、遺漏數據問題復現、解決

一、背景

  1. Oracle 數據庫版本信息:
序號 BANNER
1 Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production
2 PL/SQL Release 11.2.0.4.0 - Production
3 CORE 11.2.0.4.0 Production
4 TNS for 64-bit Windows: Version 11.2.0.4.0 - Production
5 NLSRTL Version 11.2.0.4.0 - Production
  1. 現象
    採用 Oracle 數據庫進行分頁查詢時 第x頁 數據和 第x+n頁 數據存在重複數據,並且存在缺失/丟失數據的現象。

二、數據準備

在復現上述問題時我們需要先準備測試數據(表 AAA 有 A、B 兩列共 33 條數據),腳本如下:

-- 創建測試表並導入數據
CREATE TABLE AAA
(
  A NUMBER(10),
  B NUMBER(10)
);
INSERT INTO AAA (A, B) VALUES (1, 123);
INSERT INTO AAA (A, B) VALUES (2, 123);
INSERT INTO AAA (A, B) VALUES (3, 123);
INSERT INTO AAA (A, B) VALUES (4, 123);
INSERT INTO AAA (A, B) VALUES (5, 123);
INSERT INTO AAA (A, B) VALUES (6, 123);
INSERT INTO AAA (A, B) VALUES (7, 123);
INSERT INTO AAA (A, B) VALUES (8, 123);
INSERT INTO AAA (A, B) VALUES (9, 123);
INSERT INTO AAA (A, B) VALUES (10, 123);
INSERT INTO AAA (A, B) VALUES (11, 123);
INSERT INTO AAA (A, B) VALUES (12, 123);
INSERT INTO AAA (A, B) VALUES (13, 123);
INSERT INTO AAA (A, B) VALUES (14, 123);
INSERT INTO AAA (A, B) VALUES (15, 123);
INSERT INTO AAA (A, B) VALUES (16, 123);
INSERT INTO AAA (A, B) VALUES (17, 123);
INSERT INTO AAA (A, B) VALUES (18, 1223);
INSERT INTO AAA (A, B) VALUES (19, 123);
INSERT INTO AAA (A, B) VALUES (20, 123);
INSERT INTO AAA (A, B) VALUES (21, 123);
INSERT INTO AAA (A, B) VALUES (22, 123);
INSERT INTO AAA (A, B) VALUES (23, 123);
INSERT INTO AAA (A, B) VALUES (24, 123);
INSERT INTO AAA (A, B) VALUES (25, 123);
INSERT INTO AAA (A, B) VALUES (26, 123);
INSERT INTO AAA (A, B) VALUES (27, 123);
INSERT INTO AAA (A, B) VALUES (28, 123);
INSERT INTO AAA (A, B) VALUES (29, 123);
INSERT INTO AAA (A, B) VALUES (30, 123);
INSERT INTO AAA (A, B) VALUES (31, 123);
INSERT INTO AAA (A, B) VALUES (32, 123);
INSERT INTO AAA (A, B) VALUES (33, 123);
COMMIT;

三、復現問題

使用分頁查詢腳本對每頁進行查詢:

--第一頁
SELECT *
  FROM (SELECT T.*, ROWNUM RN
          FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
         WHERE ROWNUM <= 10)
 WHERE RN > 0;

--第二頁
SELECT *
  FROM (SELECT T.*, ROWNUM RN
          FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
         WHERE ROWNUM <= 20)
 WHERE RN > 10;

--第三頁
SELECT *
  FROM (SELECT T.*, ROWNUM RN
          FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
         WHERE ROWNUM <= 30)
 WHERE RN > 20;

--第四頁 
SELECT *
  FROM (SELECT T.*, ROWNUM RN
          FROM (SELECT A.* FROM AAA A ORDER BY A.B ASC) T
         WHERE ROWNUM <= 40)
 WHERE RN > 30;

查詢結果如下:
第一頁數據:
在這裏插入圖片描述
第二頁數據:
在這裏插入圖片描述
第三頁數據:
在這裏插入圖片描述
第四頁數據:
在這裏插入圖片描述

仔細觀察每頁的數據,從中可以看到A=17在第二頁、第三頁、第四頁數據存在重複,A=8在第一頁、第二頁、第三頁數據存在重複;另外我們還發現數據總量是 33 條數據,因爲存在重複數據,在總量不變得情況下說明有數據丟失。
此外我們發現分頁查詢時我們的排序字段是 B ,並且 B 列中存在大量重複值(不全重複)全重複不會存在我們在這說的問題,在這就不說明了,感興趣的話可以自己試試,將上面的數據 B=1223 改成和其他一樣的就行。

四、產生原因

通過上一步的問題復現,我們發現在分頁時排序字段是 B列,並且 B 列存在不同值(有大量重複值),通過僞列進行排序分頁後變得不穩定導致,如果 B 列值都一樣,那順序從數據塊中讀取,不會產生上述問題。

五、解決方案

解決方案其他很簡單,只需要將排序字段改成其他非大量重複列即可。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章