數據文件的作用
HWM的基本概念
查看數據文件的使用情況
包括內容：數據文件大小，已經used空間，free空間，hwm信息
select /*+ ordered use_hash(a,b,c) */
a.file_id,a.file_name,a.filesize, b.freesize,
(a.filesize-b.freesize) usedsize,
c.hwmsize,
c.hwmsize - (a.filesize-b.freesize) unsedsize_belowhwm,
a.filesize - c.hwmsize canshrinksize
from
(
select file_id,file_name,round(bytes/1024/1024) filesize from dba_data_files
) a,
(
select file_id,round(sum(dfs.bytes)/1024/1024) freesize from dba_free_space dfs
group by file_id
) b,
(
select file_id,round(max(block_id)*8/1024) HWMsize from dba_extents
group by file_id) c
where a.file_id = b.file_id
and a.file_id = c.file_id
order by unsedsize_belowhwm desc
結果說明：
File_id ： 文件編號
File_name: 文件名稱
File_size: 數據文件佔用磁盤空間大小
Freesize：文件中被標記爲free的空間大小
Usedsize: 使用的空間大小。
Hwmsize： 已經分配出去的空間大小，如果希望通過alter database datafile … resize integerM回收空間，將需要這個值作爲參考，不能回收到這個值之下，否則會報錯。
Freee_belowhwm_size： 在HWM（高水位標記線之下的空閒空間數），這個是理論上的可以回收的空間大小。
Curr_can_shrink： 這個是實際大小與HWM標記之間的差，就是還沒有分配出去的空間大小。
file_id | file_name | filesize | freesize | usedsize | hwmsize | free_belowhwm_size | curr_can_shrink |
11 | /oradata/ODSD01.dbf | 2048 | 1908 | 140 | 2048 | 1908 | 0 |
12 | /oradata/ODSD02.dbf | 2048 | 1897 | 151 | 2048 | 1897 | 0 |
20 | /oradata/ODSD10.dbf | 2048 | 1897 | 151 | 2048 | 1897 | 0 |
16 | /oradata/ODSD06.dbf | 2048 | 1889 | 159 | 2048 | 1889 | 0 |
15 | /oradata/ODSD05.dbf | 2048 | 1888 | 160 | 2048 | 1888 | 0 |
19 | /oradata/ODSD09.dbf | 2048 | 1885 | 163 | 2048 | 1885 | 0 |
13 | /oradata/ODSD03.dbf | 2048 | 1884 | 164 | 2048 | 1884 | 0 |
17 | /oradata/ODSD07.dbf | 2048 | 1884 | 164 | 2048 | 1884 | 0 |
14 | /oradata/ODSD04.dbf | 2048 | 1813 | 235 | 2041 | 1806 | 7 |
34 | /oradata/DWD01.dbf | 4000 | 3701 | 299 | 2088 | 1789 | 1912 |
51 | /oradata/ODSD11.dbf | 2048 | 1963 | 85 | 1584 | 1499 | 464 |
21 | /oradata/ODSI01.dbf | 2048 | 1913 | 135 | 1617 | 1482 | 431 |
25 | /oradata/ODSI05.dbf | 2048 | 1910 | 138 | 1607 | 1469 | 441 |
22 | /oradata/ODSI02.dbf | 2048 | 1903 | 145 | 1606 | 1461 | 442 |
24 | /oradata/ODSI04.dbf | 2048 | 1909 | 139 | 1592 | 1453 | 456 |
23 | /oradata/ODSI03.dbf | 2048 | 1892 | 156 | 1603 | 1447 | 445 |
48 | /oradata/ODSI06.dbf | 2048 | 1925 | 123 | 1559 | 1436 | 489 |
30 | /oradata/TODSD05.dbf | 2048 | 1804 | 244 | 1315 | 1071 | 733 |
18 | /oradata/ODSD08.dbf | 2048 | 1881 | 167 | 1225 | 1058 | 823 |
27 | /oradata/TODSD02.dbf | 2048 | 1818 | 230 | 1244 | 1014 | 804 |
31 | /oradata/TODSI01.dbf | 2048 | 1977 | 71 | 936 | 865 | 1112 |
35 | /oradata/DWI01.dbf | 2048 | 1973 | 75 | 936 | 861 | 1112 |
32 | /oradata/TODSI02.dbf | 2048 | 1969 | 79 | 867 | 788 | 1181 |
43 | /oradata/DWI03.dbf | 2048 | 1975 | 73 | 802 | 729 | 1246 |
42 | /oradata/DWI02.dbf | 2048 | 1983 | 65 | 755 | 690 | 1293 |
39 | /oradata/TODSI04.dbf | 2048 | 1971 | 77 | 680 | 603 | 1368 |
26 | /oradata/TODSD01.dbf | 2048 | 1819 | 229 | 830 | 601 | 1218 |
40 | /oradata/TODSI05.dbf | 2048 | 1976 | 72 | 609 | 537 | 1439 |
28 | /oradata/TODSD03.dbf | 2048 | 1793 | 255 | 702 | 447 | 1346 |
37 | /oradata/TODSI03.dbf | 2048 | 1946 | 102 | 450 | 348 | 1598 |
29 | /oradata/TODSD04.dbf | 2048 | 1793 | 255 | 485 | 230 | 1563 |
33 | /oradata/CTL01.dbf | 500 | 494 | 6 | 21 | 15 | 479 |
10 | /oradata/xdb01.dbf | 47 | 3 | 44 | 46 | 2 | 1 |
1 | /oradata/system01.dbf | 1040 | 6 | 1034 | 1034 | 0 | 6 |
3 | /oradata/cwmlite01.dbf | 20 | 2 | 18 | 18 | 0 | 2 |
4 | /oradata/drsys01.dbf | 20 | 10 | 10 | 10 | 0 | 10 |
36 | /oradata/OD01.dbf | 500 | 407 | 93 | 93 | 0 | 407 |
5 | /oradata/example01.dbf | 139 | 0 | 139 | 139 | 0 | 0 |
54 | /oradata/TCLKING.dbf | 5 | 0 | 5 | 5 | 0 | 0 |
56 | /oradata/undotbs03.dbf | 1000 | 996 | 4 | 4 | 0 | 996 |
55 | /oradata/HWM01.dbf | 5000 | 4963 | 37 | 37 | 0 | 4963 |
49 | /oradata/DP23.dbf | 10 | 7 | 3 | 3 | 0 | 7 |
7 | /oradata/odm01.dbf | 20 | 11 | 9 | 9 | 0 | 11 |
9 | /oradata/users01.dbf | 83 | 0 | 83 | 82 | -1 | 1 |
46 | /oradata/RPTI01.dbf | 1024 | 802 | 222 | 221 | -1 | 803 |
45 | /oradata/RPTD01.dbf | 1024 | 923 | 101 | 100 | -1 | 924 |
38 | /oradata/FBI.dbf | 200 | 79 | 121 | 120 | -1 | 80 |
對想收縮的表空間中的表及索引進行rebuild
建立測試表空間
SQL> create tablespace HWM datafile ‘/oradata/HWM01.dbf’ size 5000M;
Tablespace created;
SQL> alter tablespace HWM add datafile '/oradata/HWM02.dbf' size 5000M;
Tablespace altered
move表空間的long類型
LONG類型的數據超難管理，不能通過move來傳輸，也不能通過諸如insert t1 select long_col from t2的方式（或者使用遊標可以解決這個問題）請注意在設計中儘量避免使用LONG類型。
檢查當前表空間中的LONG類型字段。
select /*+use_hash(ds,dtc)*/
ds.tablespace_name,ds.owner||'.'||ds.segment_name,ds.segment_type,
dtc.DATA_TYPE,dtc.COLUMN_NAME
from dba_tab_columns dtc , dba_segments ds
where dtc.TABLE_NAME = ds.segment_name
and dtc.OWNER = ds.owner
and ds.tablespace_name not in ('SYSTEM','CWMLITE','EXAMPLE','UNDOTBS2','HWM')
and data_type = 'LONG'
tablespace | segmentname | segtype | datatype | colname |
CTL | CTL.ETL_LOG | TABLE | LONG | EXECUTE_SQL |
CTL | CTL.PLAN_TABLE | TABLE | LONG | OTHER |
DWD | DW.PLAN_TABLE | TABLE | LONG | OTHER |
CTL | OD.PLAN_TABLE | TABLE | LONG | OTHER |
FBI | FBI.PLAN_TABLE | TABLE | LONG | OTHER |
對long類型的數據處理的一個簡單的方法實將LONG類型字段直接修改爲LOB類型。
select /*+use_hash(ds,dtc)*/
'alter table '||ds.owner||'.'||ds.segment_name||' modify '||dtc.COLUMN_NAME||' clob;'
from dba_tab_columns dtc , dba_segments ds
where dtc.TABLE_NAME = ds.segment_name
and dtc.OWNER = ds.owner
and ds.tablespace_name not in ('SYSTEM','CWMLITE','EXAMPLE','UNDOTBS2','HWM')
and data_type = 'LONG'
修改類型語句 |
alter table CTL.ETL_LOG modify EXECUTE_SQL clob; |
alter table CTL.PLAN_TABLE modify OTHER clob; |
alter table DW.PLAN_TABLE modify OTHER clob; |
alter table OD.PLAN_TABLE modify OTHER clob; |
alter table FBI.PLAN_TABLE modify OTHER clob; |
SQL> alter table CTL.ETL_LOG modify EXECUTE_SQL clob;
Table altered
SQL> alter table CTL.PLAN_TABLE modify OTHER clob;
Table altered
SQL> alter table DW.PLAN_TABLE modify OTHER clob;
Table altered
SQL> alter table OD.PLAN_TABLE modify OTHER clob;
Table altered
SQL> alter table FBI.PLAN_TABLE modify OTHER clob;
Table altered
move表空間下的普通table及index
SQL> alter table tbname move tablespace newtbname;
Move一個表到另外一個表空間時，索引不會跟着一塊move，而且會失效。在創建失效的索引之前，使用到索引的查詢語句將會報錯。失效的索引需要使用rebuild重創建。
Alter index index_name rebuild;
Alter index pk_name rebuild;
如果我們需要move索引到另外一個表空間，則需要使用rebuild
Alter index index_name rebuild tablespace tbs_name;
Alter index pk_name rebuild tablespace tbs_name;
select ds.tablespace_name,'alter table '||ds.owner||'.'||ds.segment_name||' move tablespace HWM;'
from dba_segments ds
where ds.tablespace_name not in('SYSTEM','CWMLITE','EXAMPLE','UNDOTBS2',
'HWM','XDB','WKSYS','CTXSYS','ODM_MTR','USERS','DRSYS','HTEC','HAPPYTREE')
and ds.segment_type = 'TABLE';
SQL> alter table ODS.SM_PRODUCT_SPEC_SHOW move tablespace HWM;
Table altered
SQL> alter table DW.D_PRODUCT_INFO move tablespace HWM;
Table altered
select ds.tablespace_name,'alter INDEX '||ds.owner||'.'||ds.segment_name||' rebuild tablespace HWM;'
from dba_segments ds
where ds.tablespace_name not in('SYSTEM','CWMLITE','EXAMPLE','UNDOTBS2',
'HWM','XDB','WKSYS','CTXSYS','ODM_MTR','USERS','DRSYS','HTEC','HAPPYTREE')
and ds.segment_type = 'INDEX'
…
SQL> alter INDEX CTL.IDX_TL_ADJUSTMENT_CONFIRMDATE rebuild tablespace HWM;
Index altered
SQL> alter INDEX CTL.IDX_TL_ADJUSTMENT_ORDER rebuild tablespace HWM;
Index altered
…
move表空間下的分區table及index
和普通表一樣，索引也會失效，區別的僅僅是語法而已。
分區表move基本語法
如果是單級分區，則使用關鍵字partition，如果是多級分區，則使用subpartition替代partition。如果分區或分區索引比較大，可以使用並行move或rebuild，parallel（degree 2）。
重建全局索引
Alter index global_index rebuild;
或
Alter index global_index rebuild tablespace tbs_name;
重建局部索引
Alter table tab_name modify partition partition_name rebuild unusable local indexes;
或
Alter index local_index_name rebuild partition partition_name tablespace tbs_name;
Move分區表
select cname
from (
select rownum rm,'alter table '||ds.owner||'.'||ds.segment_name||' move partition '||ds.partition_name||' tablespace HWM;' cname
from dba_segments ds
where ds.tablespace_name not in('SYSTEM','CWMLITE','EXAMPLE','UNDOTBS2',
'HWM','XDB','WKSYS','CTXSYS','ODM_MTR','USERS','DRSYS','HTEC','HAPPYTREE')
and ds.segment_type = 'TABLE PARTITION'
) c
where rm between 1 and 100;
循環執行上述語句，直到選不出結果。
SQL> alter table ODS.CR_PS_INVENTORY_ITEM move partition CR_PS_INVENTORY_ITEM_P070603 tablespace HWM;
Table altered
SQL> alter table ODS.CR_PS_INVENTORY_ITEM move partition CR_PS_INVENTORY_ITEM_P070604 tablespace HWM;
Table altered
重建全局索引
Oracle的全局索引也存儲在dba_segments中，並以index標誌，而且其重建方式跟普通索引一致，所以在執行忘回導入的時候需要按照move 普通表；move分區表；move全局索引；move分區索引；move lob對象的順序進行。
重建分區索引
視圖dba_part_indexes存儲分區表的本地索引，查詢發現當前系統中不存在本地索引，可以忽略。
select * from dba_part_indexes t where t.owner not in ('SYSTEM','SH')
move表空間下的LOB類型
在建立含有Lob字典的表時，oracle會自動爲Lob字段建立兩個單獨的segment，一個用來存放數據（segment_type=LOBSEGMENT），另一個用來存放索引（segment_type=LOBINDEX）。默認他們會存儲在和表一起的表空間。
我們對錶move時，LOB類型字段和該字段索引不會跟着move，必須使用單據的語句來執行該字段的move，語法如下：
Alter table t321 move tablespace HWM;
Later table t321 move lob(en) store as (tablespace HWM);
select 'alter table '||dtc.owner||'.'||dtc.TABLE_NAME||' move lob('||dtc.COLUMN_NAME||') store as(tablespace HWM);'
from dba_tab_columns dtc
where dtc.OWNER in('CTL','DW','RPT','OD','ODS','TODS','FBI','DP22','DP23','TCLKING')
and dtc.DATA_TYPE like '%LOB'
SQL> alter table DP22.D_KPI move lob(KPIFORM) store as(tablespace HWM);
Table altered
SQL> alter table DP22.D_KPI move lob(KPIFORMDSPN) store as(tablespace HWM);
Table altered
執行完上述操作步驟後，我們檢查tablespace的空間使用情況可以發現，所有相關數據文件的hwm都已經變爲0，也就是說所有的空間都已經變爲未分配狀態。但這時如果我們將數據文件dump出去，會發現原來的數據還在，只不過在數據字典中將其標識爲未分配。
Move對象的逆順序
普通表對象
將普通表對象和分區表對象按照其owner的不同從HWM臨時表空間move到其默認的表空間中區。
select ds.tablespace_name,'alter table '||ds.owner||'.'||ds.segment_name||' move tablespace '||du.default_tablespace||';'
from dba_segments ds , dba_users du
where ds.owner = du.username
and ds.owner in ('CTL','DW','RPT','OD','ODS','TODS','FBI','DP22','DP23','TCLKING')
and ds.tablespace_name = 'HWM'
and ds.segment_type = 'TABLE';
SQL> alter table TODS.CR_PARTY_RELATIONSHIP move tablespace TODSD;
Table altered
SQL> alter table TODS.CR_PARTY_RELATIONSHIP_TYPE move tablespace TODSD;
Table altered
分區表對象
select cname
from (
select rownum rm,'alter table '||ds.owner||'.'||ds.segment_name||' move partition '||ds.partition_name||' tablespace '||du.default_tablespace||';' cname
from dba_segments ds , dba_users du
where ds.owner = du.username
and ds.owner in ('CTL','DW','RPT','OD','ODS','TODS','FBI','DP22','DP23','TCLKING')
and ds.tablespace_name = 'HWM'
and ds.segment_type = 'TABLE PARTITION'
) c
where rm between 1 and 500;
反覆執行上述過程，直到沒有記錄可以選擇。
SQL> alter table ODS.CR_PS_INVENTORY_ITEM move partition CR_PS_INVENTORY_ITEM_P080513 tablespace ODSD;
Table altered
SQL> alter table ODS.CR_PS_INVENTORY_ITEM move partition CR_PS_INVENTORY_ITEM_P080514 tablespace ODSD;
Table altered
索引對象
索引對象存儲的tablespace的命令標準爲username+’I’，如果類似的表空間不存在，我們就將索引數據存儲到用戶的默認表空間中。所以我們可以使用下面的語句將index rebuild到對應的表空間中。
select 'alter INDEX '||ds.owner||'.'||ds.segment_name||' rebuild tablespace '||nvl(dt.tablespace_name,du.default_tablespace)||';'
from dba_segments ds , dba_users du, dba_tablespaces dt
where ds.owner = du.username
and dt.tablespace_name(+) = du.username||'I'
and ds.owner in ('CTL','DW','RPT','OD','ODS','TODS','FBI','DP22','DP23','TCLKING')
and ds.tablespace_name = 'HWM'
and ds.segment_type = 'INDEX'
LOB類型
Lob類型數據隨着table對象存儲在對象owner的默認表空間中。
select 'alter table '||dtc.owner||'.'||dtc.TABLE_NAME||' move lob('||dtc.COLUMN_NAME||') store as(tablespace '||du.default_tablespace||');'
from dba_tab_columns dtc,dba_users du
where dtc.OWNER = du.username
and dtc.OWNER in('CTL','DW','RPT','OD','ODS','TODS','FBI','DP22','DP23','TCLKING')
and dtc.DATA_TYPE like '%LOB'
SQL> alter table FBI.TIME_FORMAT move lob(FORMAT) store as(tablespace FBI);
Table altered
SQL> alter table FBI.URLTABLE move lob(DETAIL) store as(tablespace FBI);
Table altered
SQL> alter table OD.PLAN_TABLE move lob(OTHER) store as(tablespace OD);
Table altered
收縮空閒表空間
首先，如果沒有分配的空間不足100M，則不考慮收縮。
收縮目標：當前數據文件大小 － （沒分配空間－ 100M）×0.8
select /*+ ordered use_hash(a,c) */
'alter database datafile '''||a.file_name||''' resize '
||round(a.filesize - (a.filesize - c.hwmsize-100) *0.8)||'M;',
a.filesize,
c.hwmsize
from
(
select file_id,file_name,round(bytes/1024/1024) filesize from dba_data_files
) a,
(
select file_id,round(max(block_id)*8/1024) HWMsize from dba_extents
group by file_id) c
where a.file_id = c.file_id
and a.filesize - c.hwmsize > 100
收縮語句 | 文件大小 | 收縮目標 |
alter database datafile '/oradata/HWM02.dbf' resize 2671M; | 5000 | 1989 |
alter database datafile '/oradata/ODSD01.dbf' resize 598M; | 2048 | 136 |
alter database datafile '/oradata/ODSD02.dbf' resize 592M; | 2048 | 128 |
alter database datafile '/oradata/ODSD03.dbf' resize 591M; | 2048 | 127 |
alter database datafile '/oradata/ODSD04.dbf' resize 742M; | 2048 | 316 |
alter database datafile '/oradata/ODSD05.dbf' resize 594M; | 2048 | 130 |
alter database datafile '/oradata/ODSD06.dbf' resize 597M; | 2048 | 134 |
alter database datafile '/oradata/ODSD07.dbf' resize 598M; | 2048 | 135 |
alter database datafile '/oradata/ODSD08.dbf' resize 472M; | 1470 | 122 |
alter database datafile '/oradata/ODSD09.dbf' resize 587M; | 2048 | 122 |
alter database datafile '/oradata/ODSD10.dbf' resize 595M; | 2048 | 132 |
alter database datafile '/oradata/ODSI01.dbf' resize 507M; | 1783 | 88 |
alter database datafile '/oradata/ODSI02.dbf' resize 505M; | 1774 | 88 |
alter database datafile '/oradata/ODSI03.dbf' resize 529M; | 1772 | 118 |
alter database datafile '/oradata/ODSI04.dbf' resize 517M; | 1763 | 105 |
alter database datafile '/oradata/ODSI05.dbf' resize 525M; | 1775 | 113 |
alter database datafile '/oradata/TODSD01.dbf' resize 497M; | 1154 | 233 |
alter database datafile '/oradata/TODSD02.dbf' resize 561M; | 1485 | 230 |
alter database datafile '/oradata/TODSD03.dbf' resize 465M; | 1051 | 218 |
alter database datafile '/oradata/TODSD04.dbf' resize 431M; | 878 | 219 |
alter database datafile '/oradata/TODSD05.dbf' resize 598M; | 1542 | 262 |
alter database datafile '/oradata/TODSI01.dbf' resize 385M; | 1238 | 72 |
alter database datafile '/oradata/TODSI02.dbf' resize 365M; | 1183 | 60 |
alter database datafile '/oradata/CTL01.dbf' resize 146M; | 197 | 33 |
alter database datafile '/oradata/DWD01.dbf' resize 770M; | 2550 | 225 |
alter database datafile '/oradata/DWI01.dbf' resize 386M; | 1238 | 73 |
alter database datafile '/oradata/OD01.dbf' resize 152M; | 254 | 27 |
alter database datafile '/oradata/TODSI03.dbf' resize 288M; | 850 | 48 |
alter database datafile '/oradata/TODSI04.dbf' resize 324M; | 1034 | 46 |
alter database datafile '/oradata/TODSI05.dbf' resize 343M; | 977 | 84 |
alter database datafile '/oradata/DWI02.dbf' resize 356M; | 1094 | 72 |
alter database datafile '/oradata/DWI03.dbf' resize 366M; | 1131 | 75 |
alter database datafile '/oradata/RPTD01.dbf' resize 231M; | 365 | 98 |
alter database datafile '/oradata/RPTI01.dbf' resize 300M; | 462 | 159 |
alter database datafile '/oradata/ODSI06.dbf' resize 505M; | 1737 | 97 |
alter database datafile '/oradata/ODSD11.dbf' resize 535M; | 1757 | 129 |
alter database datafile '/oradata/undotbs03.dbf' resize 176M; | 283 | 49 |
檢查磁盤當前剩餘空間
$ bdf
/dev/vg01/lvol1 133120000 33173720 99166120 25% /oradata
小結
執行整個步驟之前，/oradata磁盤下的剩餘空間不足6G，執行步驟之後我們看到，目前系統中有將近100G的剩餘空間^_^。
效果明顯。