背景

臨上線前測試比較努力，遇到閃退或者其他問題，會把日志包打給我，由于app內存限制，目前每次打包都是1m大小，所以有時查找問題的上下文比較吃力。同時由于日志比較多，根據關鍵詞過濾的需求越來越重要。

于是決定學寫腳本完成這個任務，根據我的要求，工作流程應該是傳入壓縮包，根據后綴名解壓，根據日期排序后合并成一個文件，按需過濾關鍵詞。

---

先上代碼

#!/usr/bin/env bash # Created By Vanch at 2018/9/20printHelp() {echo "Uncompess log files from inputed zip"echo "Then Merge these logs to one file"echo "Supported file types: zip tar tar.gz tar.bz2"echoecho "Use -s for filtering socket result to socket.log"echo echo "Have fun!" }#如果沒輸入參數，就打印幫助信息 if [ $# -eq 0 ]; thenprintHelpexit 0 fi#把長選項轉到短選項 for arg in "$@"; doshiftcase "$arg" in"--help") set -- "$@" "-h" ;;"--version") set -- "$@" "-v" ;;"--list") set -- "$@" "-l" ;;*) set -- "$@" "$arg"esac done #獲取短選項 OPTIND=1 printS=false; while getopts "dmksahvl" opt; docase $opt inh) #輸入為help，就打印幫助信息printHelpexit 0;;l) #支持單獨獲取支持文件后綴列表echo "Supported file types: zip tar tar.gz tar.bz2"exit 0;;v) #支持查找版本號echo "1.0.0"exit 0;;s) #過濾SocketprintS=true;;esac done#獲得壓縮包地址 file=${!#} #如果不存在就退出 if [ ! -f "$file" ]; thenecho "File not exist!"exit 0; fi #獲取壓縮后綴 fileName=`basename $file` suffix=${fileName#*.} #判斷文件類型 support=('tar','tar.gz','tar.bz2','zip') if [ -z `echo "${support[@]}" | grep -w "$suffix"` ] ; thenecho "File type not support!"exit 0; fi #拼接文件夾地址 fileDir=$(dirname $file)/${fileName%%.*} if [ -d $fileDir ]; thenrm -rf $fileDir fi mkdir $fileDir cd $fileDir #解壓文件 case $suffix in'tar')eval "tar xvf $file > /dev/null 2>&1";;'tar.gz')eval "tar zxvf $file > /dev/null 2>&1";;'tar.bz2')eval "tar jxvf $file > /dev/null 2>&1";;'zip')eval "unzip -o $file > /dev/null 2>&1";; esac echo 'Uncompass Success!'#獲取日志列表，按排序合并到一個日志 mergeFile=./merge.log logCount=0 #搜索com開頭的日志，按日期排序，用？臨時代替空格 for logName in `ls | grep 'com' | sort -n | tr " " "?"`; dologName=${logName//'?'/' '}cat ./"$logName" >> $mergeFile((logCount++)) done #不存在日志就打斷 if [ $logCount -eq 0 ]; thenecho "Log not exist!"exit fi echo 'Merge Success!' #打印socket if [ $printS = true ]; thencat $mergeFile | grep -i 'socket' >> ./socket.logecho 'Filter socket' fi

---

遇到的問題

查詢了很多資料后寫完了這個腳本，基本滿足了我的需求，下面總結一下怎么解決遇到的問題。

使用環境

一開始學腳本時，書上都說#! /bin/bash，但是看項目中大神寫的腳本，都是#!/usr/bin/env bash，有什么區別呢？

腳本用env啟動的原因，是因為腳本解釋器在linux中可能被安裝于不同的目錄，env可以在系統的PATH目錄中查找。
同時，env還規定一些系統環境變量。

不同的系統，解釋器的路徑可能也不同，所以使用絕對路徑是比較危險的方式。通過從環境中查找，可以保證兼容性。

---

獲取選項

開發中我們經常用到命令，這些命令一般都配合選項達到不同的效果，比如最常用的ls -al，通過-a來指定結果包含隱藏文件，通過-l達到列表顯示的效果。

通過查詢相關資料，我發現獲取選項普遍的做法是使用getopts命令，但是這個方法只能獲取-h這種短選項，對于--help長選項就不行。

第一種辦法是換成getopt命令，但是并不是每個系統都支持這個命令。具體使用和getopts類似，比如getopt -o ab:c -l a-long:b-long

第二種方法是把支持的長命令轉成短命令，我使用的就是這種方式，相對來說比較容易理解，且case寫的比較統一。通過shift取出參數，再set --的方式重寫，最后OPTIND=1把指針指回第一個選項。

---

文件路徑和文件后綴

按需求需要判斷后綴名來解壓，那么就需要判斷tar.gz之類的問題。同時，如果傳入的文件目錄是隱藏目錄，也會造成一定的障礙。我們假設傳入文件路徑為/a/.b/c.tar.gz。

${param#pattern} 從param前面刪除pattern的最小匹配

${param##pattern} 從param前面刪除pattern的最大匹配

${param%pattern} 從param后面刪除pattern的最小匹配

${param%%pattern} 從param后面刪除pattern的最大匹配

如果按照${fileName##*.}來截取，那么只能拿到gz。
如果按照${fileName#*.}來截取，拿到的又是b/c.tar.gz。那怎么辦呢？

好在有dirname可以直接獲取文件路徑，basename拿到文件名，單獨對文件名進行${fileName#*.}就可以拿到tar.gz了。

---

去除不必要的打印

執行解壓命令時，會打印解壓步驟，一般來說也需要顯示，那如果我們不想要打印出來呢？有一個辦法就是在命令之后加上> /dev/null 2>&1

/dev/null ：代表空設備文件

> ：代表重定向到哪里，例如：echo "123" > /home/123.txt

1 ：表示stdout標準輸出，系統默認值是1，所以">/dev/null"等同于"1>/dev/null"

2 ：表示stderr標準錯誤

& ：表示等同于的意思，2>&1，表示2的輸出重定向等同于1

所以含義就是把命令輸出結果和錯誤輸出重定向，使得輸出不在當前屏幕顯示，由于null比較特殊，向這個文件輸入等于進入黑洞，因此達到效果。

---

數組與空格

使用ls | grep的方式來過濾結果獲取文件名數組的最大問題是，如果文件名包含空格，那么前后會被分割成兩個單元，導致處理比較困難。

比較討巧的方法是臨時用特殊符號代替空格，在使用時再替換回來。這種方法不會改變文件名，也不用寫復雜的數組合并，比較符合簡單的設計。

tr " " "?" ${logName//'?'/' '}

總結

通過這次簡單的腳本實驗，對shell有了新的認識，及時記錄遇到的問題，相信下次會更有印象。使用腳本，可以讓工作更有效率，相信以后也會越用越多。

轉載于:https://www.cnblogs.com/vanch/p/9682554.html

總結

以上是生活随笔為你收集整理的初试Shell脚本的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。