Linux文件查找、參數替換和壓縮
1.文件查找
- 在文件系統上查找符合條件的文件
- 文件查找：locate，find
- 非實時查找（數據庫查找）：locate
- 實時查找：find
Locate
-
查詢系統上預建的文件索引數據庫
- /var/lib/mlocate/mlocate.db
-
依賴於事先構建的索引
- 索引的構建是在系統較爲空閒時自動進行（週期性任務），管理員手動更新數據庫（updatedb）
-
索引構建過程需要遍歷整個根文件系統，極消耗資源
-
工作特點：
- 查找速度快
- 模糊查找
- 非實時查找
- 搜索的是文件的全路徑，不僅僅是文件名
- 可能只搜索用戶具備讀取和執行權限的目錄
-
locate KEYWORD
-
有用的選項：
-i 不區分大小寫的搜索 -n N 只列舉前N個匹配項目 -r 使用基本正則表達式 -
示例：
#搜索名稱或路徑中帶有“conf”的文件 $ locate conf #使用Regex來搜索以“.conf”結尾的文件 $ locate -r '\.conf$'
find
-
實時查找工具，通過遍歷指定路徑完成文件查找
-
工作特點：
- 查找速度略慢
- 精確查找
- 實時查找
- 可能只搜索用戶具備讀取和執行權限的目錄
-
語法：
-
find [OPTION]… [查找路徑] [查找條件] [處理動作]
- 查找路徑：指定具體目標路徑；默認爲當前目錄
- 查找條件：指定的查找標準，可以文件名、大小、類型、權限等標準進行；默認爲找出指定路徑下的所有文件
- 處理動作：對符合條件的文件做操作，默認輸出至屏幕
查找條件
-
指定搜索層級：
#最大搜索目錄深度，指定目錄下的文件爲第1級 -maxdepth level #最小搜索目錄深度 -mindepth level -
先處理目錄內的文件，再處理指定目錄
- -depth
-
根據文件名和inode查找：
-name "文件名稱"：支持使用glob（*，?，[],[^]） -iname "文件名稱"：不區分字母大小寫 -inum n：按inode號查找 -samefile name ：相同inode號的文件 -links n：鏈接數爲n的文件 -regex "PATTERN"：以PATTERN匹配整個文件路徑，而非文件名稱 -
根據屬主、屬組查找：
-user USERNAME:查找屬主爲指定用戶（UID）的文件 -group GROUPNAME：查找屬組爲指定組（GID）的文件 -uid USERID:查找屬主爲指定UID號的文件 -gid GROUPID：查找屬主爲指定的GID號的文件 -nouser：查找沒有屬主的文件 -nogroup：查找沒有屬組的文件 -
根據文件類型查找
- -type TYPE
- f：普通文件
- d：目錄文件
- l：符號鏈接文件
- s：套接字文件
- b：塊設備文件
- c：字符設備文件
- p：管道文件
- -type TYPE
-
空文件或目錄
- -empty
- 示例：find /app -type d -empty
-
組合條件：
- 與：-a
- 或：-o
- 非：-not !
-
德 摩根定律：
- （非A）或（非B）=非（A且B）
- （非A）且（非B）= 非（A或B）
- 示例：
- !A -a !B = !(A -o B)
- !A -o !B = !(A -a B)
-
排除目錄：
查找/etc/下，除了/etc/pki/ca-trust/ca-legacy.conf目錄的其它所有.conf後綴的文件 find /etc/ -path /etc/pki/ca-trust/ca-legacy.conf -prune -o -name "*.conf" -print 查找/etc/下，除/etc/sane.d和/etc/fonts兩個目錄的所有.conf後綴的文件 find /etc \(-path "/etc/sane.d" -o -path "/etc/fonts" \) -a -prune -o -name "*.conf" -
根據文件大小來查找
-size [+|-] #UNIT 常用單位：k，M，G，c（byte） #UNIT：（#-1，#] 如：6k表示(5k,6k] -#UNIT:[0,#-1] 如：-6k表示[0,5k] +#UNIT:(#,∞) 如：+6k表示(6k,∞)
-
根據時間戳
以”天“爲單位 -atime [+|-]#, #:[#,#+1) +#:[#+1,∞) -#:[0,#) -mtime -ctime 以”分鐘“爲單位 -amin -mmin -cmin -
根據權限查找
- -perm [/|-] MODE
- MODE:精確權限匹配
- /MODE：任何一類（u,g,o）對象的權限中只要能一位匹配即可，或關係，+從centos7開始淘汰
- -MODE：每一類對象都必須同時擁有指定權限，與關係
- 0表示不關注
- find -perm 755 會匹配權限模式恰好是755的文件
- 只要當任意人有寫權限時，find -perm /222就會匹配
- 只有當每個人都有寫權限時，find -perm -222纔會匹配
- 只有當其它人（other）有寫權限時，find -perm -002纔會匹配
- -perm [/|-] MODE
處理動作
- -print：默認的處理動作，顯示至屏幕
- -ls：類似於對查找到的文件執行 ”ls -l“命令
- -delete:刪除查找到的文件
- -fls file：查找到的所有文件的長格式信息保存至指定文件中
- -ok COMMAND {} ; 對查找到的每個文件執行由COMMAND指定的命令，對於每個文件執行命令之前，都會交互式要求用戶確認（{}前後都必須有空格）
- -exec COMMAND {}; 對查找到的每個文件執行由COMMAND指定的命令
- {}：用於引用查找到的文件名稱自身
- find傳遞查找到的文件至後面指定命令時，查找到所有符合條件的文件一次性傳遞給後面的命令
參數替換 xargs
-
由於很多命令不支持管道來傳遞參數，xargs用於產生某個命令的參數，xargs可以讀入stdin的數據，並且以空格符或回車符將stdin的數據分隔成爲參數
-
許多命令不能接受過多參數，命令執行可能會失敗，xargs可以解決
-
注意：文件名或者是其他意義的名詞內含有空格符的情況
-
find和xargs的組合：find|xargs COMMAND
-
示例：
-
ls |xargs rm ：刪除當前目錄下的大量文件 -
find /sbin/ -perm +700 | ls -l :這個命令是錯誤的 -
find /bin/ -perm /7000 | xargs ls -Sl 查找有特殊權限的文件 -
find /bin/ -perm -7000|xargs ls -Sl 此命令和上面有何區別？ -
find -type f -name “*.txt” -print0 | xargs -0 rm 以字符nul分割 -
選項：
- -n :多少個參數換行
-
2.壓縮、解壓縮及歸檔工具
- file-roller
- compress和uncompress：.Z
- gzip和gunzip：.gz
- bzip2和bunzip2：.bz2
- xz和unxz：.xz
- zip/unzip
- tar
- cpio
compress/uncompress/zcat
- compress [-dfvcVr] [-b maxbits] [file …]
- -d 解壓縮，相當於uncompress
- -c 結果輸出至標準輸出，不刪除原文件
- -v 顯示詳情
- uncompress file.Z 解壓縮
- zcat file.Z 不顯示解壓縮的前提下查看文件文件內容
- 示例 : zcat file.Z > file
gzip/gunzip/zcat
-
gzip [OPTION] … FILE …
- -d 解壓縮，相當於gunzip
- -c 結果輸出至標準輸出，保留原文件不改變
- -# 指定壓縮比，#取值爲1-9，值越大壓縮比越大
-
gunzip file.gz 解壓縮
-
zcat file.gz 不顯示解壓縮的前提下查看文本文件內容
-
示例：
gzip -c messages > messages.gz gzip -c -d messages.gz > messages zcat messages.gz > messages cat messages | gzip > m.gz
bzip2/bunzip2/bzcat
- bzip2 [option]…file…
- -k keep,保留原文件
- -d 解壓縮
- -# 1-9，壓縮比，默認爲9
- bunzip2 file.bz2 解壓縮
- bzcat file.bz2 不顯示解壓縮的前提下查看文本文件內容
xz/unxz/xzcat
-
xz [OPTION] … FILE …
- -k keep,保留原文件
- -d 解壓縮
- -# 壓縮比，取值1-9，默認爲6
-
unxz file.xz 解壓縮
-
xzcat file.xz 不顯示解壓縮的前提下查看文本文件內容
zip/unzip
- 打包壓縮
- zip -r /backup/sysconfig /etc/sysconfig/
- zip -r 壓縮後文件名 需要壓縮的目錄
- 解包解壓縮
- unzip sysconfig.zip
- cat /varr/log/messages | gzip messages -
- unzip -p message > message ： 預覽文件內容
tar工具
-
tar (Tape ARchive, 磁帶歸檔的縮寫)
-
tar [OPTION]…
-A 新增壓縮文件到已存在的壓縮 -B 設置區塊大小 -c 建立新的壓縮文件 -d 記錄文件的差別 -r 添加文件到已經壓縮的文件 -u 添加改變了和現有的文件到已經存在的壓縮文件 -x 從壓縮的文件中提取文件 -t 顯示壓縮文件的內容 -z 支持gzip解壓文件 -j 支持bzip2解壓文件 -Z 支持compress解壓文件 -v 顯示操作過程 -l 文件系統邊界設置 -k 保留原有文件不覆蓋 -m 保留文件不被覆蓋 -W 確認壓縮文件的正確性 可選參數如下： -b 設置區塊數目 -C 切換到指定目錄 -f 指定壓縮文件 --help 顯示幫助信息 --version 顯示版本信息#創建歸檔，保留權限 tar -cpvf /PATH/FILE.tar FILE... #追加文件至歸檔：注：不支持對壓縮文件追加 tar -r -f /PATH/FILE.tar #查看歸檔文件中的文件列表 tar -t -f /PATH/FILE.tar #展開歸檔 tar -x -f /PATH/FILE.tar tar -x -f /PATH/FILE.tar -C /PATH/ #結合壓縮工具實現：歸檔並壓縮 -j:bzip2,-z:gzip,-J:xz -
-exclude 排除文件
tar zcvf /root/a3.tgz -- exclude=/app/host1 -- exclude=/app/host2 /app -
-T 選項指定輸入文件 -X 選項指定包含要排除的文件列表
tar zcvf mybackup.tgz -T /root/includefilelist -X /root/excludefilelist -
split:分割一個文件爲多個文件
- 分割大的tar文件爲多份小文件
- split -b Size -d tar -file-name perfix-name
- split -b 1M -d mybackup.tgz mybackup-parts
- split -b 1M mybackup.tgz mybackup-parts
-
合併：
- cat mybackup-parts* > mybackup.tar.gz
cpio
- 功能：複製文件從或到歸檔
- cpio命令是通過重定向的方式將文件進行打包備份，還原恢復的工具，他可以解壓以".cpio" 或者".tar"結尾的文件
- cpio [選項] > 文件名或者設備名
- cpio [選項] < 文件名或者設備名
- 選項
- -o 將文件拷貝打包成文件或者將文件輸出到設備上
- -O fileName 輸出到指定的歸檔文件名
- -A 向已存在的歸檔文件中追加文件
- -i 解包，將打包文件解壓或將設備上的備份還原到系統
- -I filename 對指定的歸檔文件名解壓
- -t 預覽，查看文件內容或者輸出到設備上的文件內容
- -T filename 使用指定的文件名替代標準輸入或輸出
- -d 解包生成目錄，在cpio還原時，自動的建立目錄
- -v 顯示打包過程中的文件名稱
