rsync来实现文件同步
生活随笔
收集整理的這篇文章主要介紹了
rsync来实现文件同步
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
?
第一步,先來下載這個免費的軟件。 rsync.samba.org/ 或者 samba.anu.edu.au/rsync 一定要去官方網站下載最新的版本, 解壓縮后,編譯很簡單./configure –prefix=/usr/local/rsync && make && make install 然后先來配置服務端吧 先來編輯服務端配置文件 #vi /etc/rsyncd.conf #全局配置
uid = root
gid = root
hosts allow = 192.168.0.1,192.168.1.2(中間無空格)
#hosts deny = 0.0.0.0/32 use chroot = no # 不使用 chroot
max connections = 10 # 最大連接數為10
#motd file = /etc/rsyncd.motd #歡迎信息文件名稱和存放位置(此文件沒有,可以自行添加)
pid file = /var/run/rsyncd.pid #指定rsync的pid文件
lock file = /var/run/rsync.lock #指定支持max connections參數的鎖文件,默認值是/var/run/rsyncd.lock
log file = /var/log/rsyncd.log #指定rsync的日志文件,而不將日志發送給syslog #下面就是每個模塊的配置了
[rsync_module_name1] # 這里是認證的模塊名,在client端需要指定
path = /rsync_path/dir1 # 需要做鏡像的目錄
comment = rsync files
ignore errors # 可以忽略一些無關的IO錯誤
read only = yes # 只讀
list = no # 不允許列文件
auth users = rsync_user # 認證的用戶名,如果沒有這行,則表明是匿名,多個用戶用,分隔
secrets file = /etc/rsyncd.pas # 認證文件名
#pid file = /var/run/rsyncd.pid
#log file = /var/log/rsyncd.log
#lock file = /var/run/rsync.lock [rsync_module_name2]
…… 其中,個人認為,沒項配置都可以既在全局配置,也可以在模塊內部配置,其中如果模塊內部如果有與全局相同的配置,
則模塊內部的配置覆蓋全局的配置。 然后編輯你上面指定的認證文件,我這里是 : /etc/rsyncd.pas #vi /etc/rsyncd.pas
格式為: username:password
rsync_user:rsyncofpass 安全起見,更改認證文件屬性
#chmod 0600 /etc/rsyncd.pas ok,現在啟動下試試看吧。 #/usr/local/rsync/bin/rsync –daemon
你也可以指定 rsync運行的端口
#/usr/local/rsync/bin/rsync –daemon –port=873 如果要在啟動時把服務起來,有幾種不同的方法,比如: 加入 inetd.conf
編輯/etc/services,加入rsync 873/tcp,指定rsync的服務端口是873
編輯/etc/inetd.conf,加入rsync stream tcp nowait root /bin/rsync rsync –daemon 加入 rc.local 在各種操作系統中, rc文件存放位置不盡相同,可以修改使系統啟動時rsync –daemon加載進去。 我這里是直接加入 /etc/rc.local
/usr/local/rsync/bin/rsync –daemon –port=873
873就是rsync的默認端口號。 記得配置防火墻,允許你 rsync端口的tcp和udp協議。
873:tcp 873:udp 下面開始配置客戶端 下面這個命令行中 -vzrtopg里的v是verbose,
z是壓縮傳輸,
r是recursive,
topg都是保持文件原有屬性如屬主、時間的參數。
u是只同步已經更新的文件,避免沒有更新的文件被重復更新一次,不過要注意兩者機器的時鐘的同步。
–progress是指顯示出詳細的進度情況,
–delete是指如果服務器端刪除了這一文件,那么客戶端也相應把文件刪除,保持真正的一致。后面的rsync_user@192.168.0.2::rsync_module_name1中,之后的rsync_module_name1是模塊名,也就是在/etc/rsyncd.conf中自定義的名稱,rsync_user是指定模塊中指定的可以同步的用戶名。最后的/tmp是備份到本地的目錄名。在這里面,還可以用-e ssh的參數建立起加密的連接。
可以用–password-file=/password/path/file來指定密碼文件,這樣就可以在腳本中使用而無需交互式地輸入驗證密碼了,這里需要注意的是這份密碼文件權限屬性要設得只有屬主可讀。 #/usr/local/rsync/bin/rsync -vzrtopg –progress –delete rsync_user@192.168.0.2::rsync_module_name1 /tmp/
Password:
或者你也可以制定 password文件
由于需要系統crontab執行,所以這里采用讀入密碼文件的方式,
這個時候就成功了。 #vi /etc/rsyncd.pas
加入
注意,客戶端的密碼文件只需要密碼,而不需要用戶名!
更改文件權限 :
#chmod 0600 /etc/rsyncd.pas #/usr/local/rsync/bin/rsync -vzrtopgu –progress –delete –password-file=/etc/rsyncd.pas rsync_user@192.168.0.2::rsync_module_name1 /tmp/
? 實際操作: 服務端 uid = nobody(也可換成 root) gid = nobody(也可換成 root) hosts allow = 192.168.1.38,192.168.1.3,192.168.1.138 #hosts deny = 0.0.0.0/32 use chroot = no max connections = 4 pid file = /var/run/rsyncd.pid lock file = /var/run/rsync.lock log file = /var/log/rsyncd.log [www] path = /www ignore errors read only = yes list = no auth users = backup secrets file = /etc/backserver.pas [snmp] path = /usr/local/net-snmp ignore errors read only = yes list = no auth users = backup secrets file = /etc/backserver.pas 建立 backserver.pas #echo “backup:backserver” > /etc/backserver.pas 服務器啟動服務 /usr/local/rsync/bin/rsync --daemon --config=/etc/rsyncd.conf 客戶端運行的命令 /usr/local/rsync/bin/rsync -vzrtopgu --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238::snmp /tmp /usr/local/rsync/bin/rsync -vzrtopgu --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238::www /tmp 問題排除: 1、 [root@bo bin]# /usr/local/rsync/bin/rsync -vazu -progress --delete backup@192.168.1.238::www /tmp --password-file=/etc/backserver.pas rsync: Failed to exec ss: No such file or directory (2) rsync error: error in IPC code (code 14) at pipe.c(86) [receiver=2.6.9] rsync: writefd_unbuffered failed to write 12 bytes [receiver]: Broken pipe (32) rsync error: error in rsync protocol data stream (code 12) at io.c(1122) [receiver=2.6.9] [root@ht-store bin]# 以上錯誤可能是上面使用的參數前面的符號不正確。換成下面的就沒有上面的錯誤了 [root@bo /]# usr/local/rsync/bin/rsync -vzrtopgu --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238:www /tmp 2、 [root@ht-store /]# usr/local/rsync/bin/rsync -vzrtopgu --progress --delete backup@192.168.1.238:www /tmp/ --password-file=/etc/backserver.pas backup@192.168.1.238's password: Permission denied, please try again. backup@192.168.1.238's password: Permission denied, please try again. backup@192.168.1.238's password: Permission denied (publickey,gssapi-with-mic,password). rsync: connection unexpectedly closed (0 bytes received so far) [receiver] rsync error: unexplained error (code 255) at io.c(453) [receiver=2.6.9] [root@ht-store /]# 更改成 [root@ht-store /]# usr/local/rsync/bin/rsync -vzrtopgu --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238::www /tmp @ERROR: auth failed on module www rsync error: error starting client-server protocol (code 5) at main.c(1383) [receiver=2.6.9] [root@ht-store /]# 3、 [root@ht-store /]# /usr/local/rsync/bin/rsync -vazu --progress --delete --password-file=/etc/backserver.pas backserver@192.168.1.238::www /tmp @ERROR: auth failed on module www rsync error: error starting client-server protocol (code 5) at main.c(1383) [receiver=2.6.9] 檢查一下用戶名是否錯誤 backserver 應該是backup 4、 [root@ht-store /]# /usr/local/rsync/bin/rsync -vzar --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238:www /tmp backup@192.168.1.238's password: Permission denied, please try again. backup@192.168.1.238's password: rsync error: received SIGINT, SIGTERM, or SIGHUP (code 20) at rsync.c(244) [receiver=2.6.9] 是雙引號“ ::”backup@192.168.1.238::www爾不是單引號“:”backup@192.168.1.238:www 5、 [root@ht-store /]# /usr/local/rsync/bin/rsync -vzrtopgu --progress --delete --password-file=/etc/backserver.pas backup@192.168.1.238::www /tmp @ERROR: Unknown module 'www' rsync error: error starting client-server protocol (code 5) at main.c(1383) [receiver=2.6.9] 這是因為服務器端 hosts allow 沒有允許該主機訪問 6、 # chmod 600 rsyncd.conf rsyncd.secrets -rw------- 1 root root 795 Aug 23 06:21 rsyncd.conf -rw------- 1 root root 37 Aug 23 06:23 rsyncd.secrets 注意:這個安全配置很重要,假如不這樣做客戶機連接服務器時會提示: @ERROR: auth failed on module smb_recover_files rsync: connection unexpectedly closed (102 bytes read so far) rsync error: error in rsync protocol data stream (code 12) at io.c(165) 服務器端日志將出現錯誤提示: 2005/08/23 06:32:01 [8388] secrets file must not be other-accessible (see strict modes option) 2005/08/23 06:32:01 [8388] continuing without secrets file 2005/08/23 06:32:01 [8388] auth failed on module smb_recover_files from documentserver (192.168.0.159) 安裝Windows rsync安裝程序cwRsync_2.0.10_Installer.zip 安裝可以一路next。 同步目錄的時候執行 D:\LinuxBak\backup>rsync -vzrtopgu --progress --delete rsync_user@192.168.6.143::mysqldb c:\
The source and destination cannot both be remote.
rsync error: syntax or usage error (code 1) at main.c(1068) [receiver=2.6.9] 換一個備份目錄就可以了。 在Windows下采取從文件讀取密碼方式出現的錯誤信息 D:inuxBak\bbsweb>rsync -vzrtopgu --progress --delete --password-file=D:\LinuxB
ak\bbsweb\pass.txt rsync_user@192.168.6.143::bbsweb ./
password file must not be other-accessible
continuing without password file
Password: 必需條件密碼文件存放的位置一定要是ntfs分區,另一定要注意是下面的書寫格式,--password-file=F:\pw 一定要在后面指定 D:\LinuxBak\bbsweb>rsync -vzrtopgu --progress --delete rsync://rsync_user@192.168.6.143/bbsweb ./ --password-file=F:\pw 當執行以下命令,出現錯誤信息時 D:\LinuxBak\mysqldb>rsync -vzrtopgu --progress --delete rsync://rsync_user@192.168.6.143/mysqldb ./ --password-file=F:\pw 錯誤信息: rsync: mkstemp "/cygdrive/d/LinuxBak/mysqldb/mysql/.dbvpopmail081213-14:01.tar.g
z.3favI3" failed: No such file or directory (2)
101974 100% 529.70kB/s 0:00:00 (xfer#11, to-check=1/15)
rsync: mkstemp "/cygdrive/d/LinuxBak/mysqldb/mysql/.dbvpopmail081213-15:01.tar.g
z.xI3P0F" failed: No such file or directory (2)
101975 100% 529.71kB/s 0:00:00 (xfer#12, to-check=0/15) sent 352 bytes received 1826513 bytes 3653730.00 bytes/sec
total size is 1833358 speedup is 1.00
rsync error: some files could not be transferred (code 23) at main.c(1385) [gene
rator=2.6.9] 這是因為在服務器端的備份文件dbvpopmail081213-15:01.tar.gz中有非法符號,可能造成Windows同步數據時無法識別文件名,爾導致問題。將服務器端文件改名為dbvpopmail0812131501.tar.gz 。這樣在執行同樣的命令就OK了! :) :) :)
轉載于:https://blog.51cto.com/linuxhappy/801174
總結
以上是生活随笔為你收集整理的rsync来实现文件同步的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 人工智能正在学习如何创造自己
- 下一篇: Python利用Matplotlib绘图