1.rsync守護進程模式備份數據原理 (用戶身份轉換過程)
第一步: 客戶端 --> 服務端 發送請求傳輸數據信息 執行命令 有認證用戶信息 傳輸數據信息
第二部: 服務端 --> 客戶端 接收到傳輸數據信息 審核認證用戶
發送回復信息 需要認證密碼
第三步: 客戶端 --> 服務端 發送請求傳輸數據信息 發送認證密碼信息
第四步: 服務端 --> 客戶端 發送確認信息
第五步: 客戶端 --> 服務端 用戶攜帶數據通過網絡進行傳輸 需要對用戶身份進行轉換 --> rsync (配置文件指定)
第六部: 服務端 --> 客戶端 發送數據存儲完畢確認信息 將數據保存到備份目錄中 備份目錄權限屬主為rsync
修改備份數據屬主和屬組信息 rsync用戶身份修改文件權限
錯誤說明:
chgrp ".hosts.Zb1kyS" (in backup) failed: Operation not permitted (1)
chgrp change group ownership(修改數據屬組信息)
[oldboy@backup ~]$ chgrp oldgirl oldboy
chgrp: changing group of 'oldboy': Operation not permitted
[oldboy@backup ~]$ chgrp oldgirl /etc/hosts
chgrp: changing group of '/etc/hosts': Operation not permitted
解釋說明:
普通用戶無法修改文件的屬組信息
補充: 配置文件參數
fake super = yes --- 讓指定虛擬用戶偽裝成管理員用戶, 可以強行修改文件屬主屬組權限信息
2.rsync命令參數說明
-a, --archive archive mode; equals -rlptgoD (no -H,-A,-X)
歸檔模式參數; 等價于 -rlptgoD
-r, --recursive recurse into directorie
遞歸傳輸目錄
-l, --links copy symlinks as symlinks
備份傳輸軟鏈接文件保持屬性不變
-L, --copy-links transform symlink into referent file/dir
備份傳輸軟連接文件時,會將源文件內容信息進行傳輸備份
-p, --perms preserve permissions
保持權限信息不變 644 755
-t, --times preserve modification times
保持文件修改時間不變
-o, --owner preserve owner (super-user only)
保持文件屬主信息不變
-g, --group preserve group
保持文件屬組信息不變
-D same as --devices --specials
保持設備文件屬性信息不變 c b s
-v, --verbose increase verbosity
傳輸備份數據詳細過程信息
-P same as --partial --progress
傳輸進度信息
--exclude=PATTERN exclude files matching PATTERN
根據指定數據信息進行排除
--exclude-from=FILE read exclude patterns from FILE
根據指定文件進行批量排除數據信息
--delete delete extraneous files from destination dirs
進行無差異同步傳輸數據
同步目錄數據信息時, 保證目錄中數據信息一模一樣
-z, --compress compress file data during the transfer
在傳輸數據時,對文件進行壓縮傳輸
--bwlimit=RATE limit socket I/O bandwidth
限制傳輸速率
--password-file 實現免交互傳輸數據信息
補充: 客戶端部署過程(rsync)
第一個里程: 創建生成密碼文件
echo oldboy123 >/etc/rsync.password
chmod 600 /etc/rsync.password
第二個里程: 實現免交互傳輸數據
rsync -avz /oldboy/oldboy.txt rsync_backup@172.16.1.41::backup --password-file=/etc/rsync.password
sending incremental file list
oldboy.txt
sent 93 bytes received 43 bytes 272.00 bytes/sec
total size is 0 speedup is 0.00
3. rsync守護進程備份服務企業應用
守護進程模式:
推: 客戶端 -- 數據備份 -- 備份服務器
拉: 客戶端 -- 數據恢復 -- 備份服務器
服務端 -- 數據備份 -- 客戶端 (部署rsync守護進程)
Access via rsync daemon:
Pull: rsync [OPTION...] [USER@]HOST::SRC... [DEST]
SRC: 備份服務器上模塊信息
DEST: 本地保存數據路徑信息
rsync [OPTION...] rsync://[USER@]HOST[:PORT]/SRC... [DEST]
Push: rsync [OPTION...] SRC... [USER@]HOST::DEST
rsync [OPTION...] SRC... rsync://[USER@]HOST[:PORT]/DEST
企業多模塊應用過程:
01. 守護進程模式多模塊創建
第一個里程: 配置文件中創建多個模塊信息
[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
[dev_backup]
comment = "backup dir by oldboy"
path = /backup/dev_dir/
[dba_backup]
comment = "backup dir by oldboy"
path = /backup/dba_dir/
第二個里程: 確認指定模塊路徑是否存在/權限是否正確
第三個里程: 重啟rsync服務
-
守護進程模式數據排除功能
創建測試環境: 客戶端創建
[root@nfs01 oldboy]# mkdir -p /oldboy/oldboy{01..03}
[root@nfs01 oldboy]# touch /oldboy/oldboy{01..03}/{a..c}.txt
[root@nfs01 oldboy]# tree /oldboy
/oldboy
├── oldboy01
│?? ├── a.txt
│?? ├── b.txt
│?? └── c.txt
├── oldboy02
│?? ├── a.txt
│?? ├── b.txt
│?? └── c.txt
└── oldboy03
├── a.txt
├── b.txt
└── c.txt3 directories, 9 files
需求01: 備份/oldboy目錄數據時,將oldboy01目錄進行排除,將oldboy03目錄中的b.txt文件進行排除
需求02: 備份/oldboy目錄數據時,將oldboy01目錄進行排除a.txt oldboy02/b.txt oldboy03/c.txt
方法一: 利用rsync命令參數實現
--exclude
# rsync -avz /oldboy/ --exclude=oldboy01/ --exclude=oldboy03/b.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
sending incremental file list
./
oldboy02/
oldboy02/a.txt
oldboy02/b.txt
oldboy02/c.txt
oldboy03/
oldboy03/a.txt
oldboy03/c.txtsent 420 bytes received 134 bytes 1,108.00 bytes/sec
total size is 12,288 speedup is 22.18
說明: 利用--exclude排除數據信息,需要利用相對路徑指定需要排除的數據,相對路徑是相對于同步目錄而言
方法二: 利用rsync命令參數實現:
--exclude-from
第一個里程: 編寫排除數據信息文件
[root@nfs01 oldboy]# cat execlude.txt
oldboy01/a.txt
oldboy02/b.txt
oldboy03/c.txt
第二個里程: 利用命令參數進行排除多個數據
[root@nfs01 oldboy]# rsync -avz /oldboy/ --exclude-from=/oldboy/execlude.txt rsync_backup@172.16.1.41::sa_backup --password-file=/etc/rsync.password
sending incremental file list
./
execlude.txt
oldboy01/
oldboy01/b.txt
oldboy01/c.txt
oldboy02/
oldboy02/a.txt
oldboy02/c.txt
oldboy03/
oldboy03/a.txt
oldboy03/b.txtsent 601 bytes received 180 bytes 1,562.00 bytes/sec
total size is 12,333 speedup is 15.79
方法三: 利用服務端配置文件參數
exclude --- 指定數據進行排除同步 == 客戶端命令參數 --exclude
exclude from --- 指定多個數據排除文件信息,排除多個數據 == 客戶端命令參數 --exclude-from[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude = oldboy01/a.txt oldboy02/b.txt[sa_backup]
comment = "backup dir by oldboy"
path = /backup/sa_dir/
exclude from = /backup/sa_dir/execlude.txt
====================================================================
補充: rsyncd.conf配置文件說明
全局配置: 在模塊上面配置的信息,為全局配置,會影響所有模塊
局部配置: 在模塊里面配置的信息,為局部配置,只會影響指定模塊
====================================================================- 守護進程模式數據無差異同步
--delete
企業應用: 保證數據同步一致 存儲服務器數據 == 備份服務器數據
PS: --delete參數,一定要慎用,容易造成誤刪數據
- 守護進程模式數據無差異同步
-
守護進程模式創建子目錄功能
[root@nfs01 oldboy]# rsync -avz /etc/hosts rsync_backup@172.16.1.41::sa_backup/oldboy/ --password-file=/etc/rsync.password
sending incremental file list
created directory oldboy
hostssent 219 bytes received 72 bytes 582.00 bytes/sec
total size is 335 speedup is 1.15 守護進程模式訪問策略功能
白名單配置/黑名單配置
參見圖示守護進程模式列表功能說明 (了解)
list = false --- 可以實現客戶端列表顯示備份服務端所有模塊信息
[root@nfs01 oldboy]# rsync rsync_backup@172.16.1.41::
sa_backup "sa backup dir"
dev_backup "dev backup dir"
dba_backup "dba backup dir"
