liunx文件定期本地備份、異地備份、刪除備份腳本
導航
一.背景
二.依賴功能介紹
三.本地備份腳本
四.異地備份腳本
五.定期刪除備份
六.github腳本地址
– – – – – – – – – – 分割線 – – – – – – – – – –
一.背景
1.總會出出現環境上的數據丟失，在沒有備份的情況下會非常的被動，不管是由於病毒還是人為的原因造成的程式、數據被刪除，有時候後悔已經來不及，不如提前做到數據的備份，而異地備份也更加的保險一點。
2.數據備份的意義就在於，當受到網路攻擊、入侵、電源故障或者操作失誤等事故的發生後，可以完整、快速、簡捷、可靠地恢復原有系統，在一定的範圍內保障系統的正常運行。
二.依賴功能介紹
1.expect
作用：expect工具是一個根據腳本與其他互動式程式進行交互
安裝語句:yum install expect
參考文檔：//www.cnblogs.com/mrwhite2020/p/16769739.html
2.cron
作用：可以根據配置文件約定的時間來執行特定的任務
參考文檔：
Linux Crontab 定時任務：//www.cnblogs.com/mrwhite2020/p/15313228.html
cron表達式：//www.cnblogs.com/mrwhite2020/p/15195550.html
3.liunx的三個時間atime,mtime,ctime
作用:定期刪除備份時一般備份文件的mtime來進行刪除
參考文檔：//www.cnblogs.com/mrwhite2020/p/16754506.html
mkdir -p /root/backup/`date "+%Y-%m-%d"`
tar -zcvPf /root/backup/`date "+%Y-%m-%d"`/test20221009.tar.gz /root/test20221009
2.封裝shell腳本:compress_backup.sh
#!/bin/bash
source_folder=/root/test20221009
backup_folder=/root/backup/`date "+%Y-%m-%d"`
source_folder_name=`echo $source_folder |awk -F "/" '{print $3}'`.tar.gz
echo "source_folder：$source_folder"
echo "backup_folder: $backup_folder"
echo "source_folder_name: $source_folder_name"
#新建立文件夾
mkdir -p /root/backup/`date "+%Y-%m-%d"`
#壓縮命令
tar -zcvPf $backup_folder/$source_folder_name $source_folder
echo "$source_folder_name文件備份成功"
3.加入crond定時任務並將輸出與錯誤重定向至文件
編輯添加crond定時任務列表
crontab -e
設置每天00:00執行一次備份任務，並將標準輸出與標準錯誤重定向至日誌文件
0 0 * * * sh /root/backup/compress_backup.sh 2>&1 > /root/backup/log_$(date +\%Y-\%m-\%d)
測試查看任務執行情況：
tail -5 /var/log/cron
查看備份文件與本地日誌正確生成
1.異地備份命令測試：
scp -C -r /root/backup/2022-10-10/ mrswhite@192.168.37.9:/root/back_up_offsite
提示輸入密碼後進行備份
查看對端文件備份成功
2.封裝expect腳本offsite_backup.expect，當提示輸入密碼時可自動對應輸入密碼
#!/usr/bin/expect -f
# 獲取當前日期 例如：2022-10-12
set date [ clock format [ clock seconds ] -format "%Y-%m-%d" ]
# 傳輸用戶名
set username mrswhite
# 對端hostIP地址
set host 192.168.37.9
# 密碼
set password test20221012
#設置本地傳輸路徑-前綴
set source_folder /root/backup
#設置兌換傳輸路徑
set backup_folder /root/back_up_offsite
# expect默認timeout為30S 超過30s未傳輸完會停止，設置為 -1 則不限制超時時間
set timeout -1
# 壓縮 遞歸 本地絕對路徑 用戶名 目標IP 目標路徑
spawn /usr/bin/scp -C -r $source_folder/$date/ $username@$host:$backup_folder
expect {
"*yes/no" {send "yes\r";exp_continue}
"*password:" {send "$password\r"}
}
expect eof
運行後查詢結果，已實現了無人值守備份的功能
查看異地文件已生成：
3.加入crond定時任務並將輸出與錯誤重定向至文件
crontab -e
設置每天02:00執行一次異地備份任務，（給本地備份充足的時間預留）並將標準輸出與標準錯誤重定向至日誌文件
0 1 * * * expect /root/backup/offsite_backup.expect 2>&1 > /root/backup/offsite_log_$(date +\%Y-\%m-\%d)
修改系統時間，重啟crond服務等待定時任務的執行，並查詢日誌：
date -s "2022-10-10 00:59:50"
service crond restart
tail -5 /var/log/cron
檢查異地文件備份成功：
1.定期刪除命令測試：
find /root/backup/ -mtime +180 | xargs rm -rf {} #刪除180天前的文件與文件夾的資訊
2.封裝shell腳本delete_expire_backupfile.sh，清理的目錄與過期時間可配置
#!/bin/bash #待清除目錄 dir=/root/backup/ #文件的過期周期 day_expireDay=10 #刪除最終為day_expireDay前的備份文件與文件夾資訊 find $dir -mtime +$day_expireDay | xargs rm -rf {}
echo "$dir下的$day_expireDay天前的文件清理成功"
查看文件清理效果如下：
3.加入crond定時任務並將輸出與錯誤重定向至文件
crontab -e
設置每天00:00執行一次異地備份任務，並將標準輸出與標準錯誤重定向至日誌文件
0 0 * * * sh /root/backup/delete_expire_backupfile.sh 2>&1 > /root/backup/delete_log__$(date +\%Y-\%m-\%d)
修改系統時間，重啟crond服務等待定時任務的執行，並查詢日誌，文件已清理成功
date -s "2022-10-12 23:59:50"
service crond restart
tail -5 /var/log/cron
//github.com/bigwhite2020/bigwhite2022/tree/main/本地備份、異地備份、刪除備份腳本
