使用 rsync 作 windows 同步備份

[2008-12-29]: 新增batch file, 寫入log

一直在找一個可以自動backup 到網路的軟體, 但 Mozy 只有2G
只計算我的相片已經 25G 以上....
我還想backup 一些常修改的, 日常會幫助我的小程式..
要求簡單:

  • 自動定時 backup
  • backup 到網路上
  • 網路硬碟當然越大越好

最後, 我將我的資料都定時backup 到我 dreamhost 的 350G 網路空間上了

近來我在做website 的backup 的時候,
使用過rsync 這一個linux 的命令, 發覺它很也強大

  1. 使用rsync 算法的增量式backup, 在只有檔案經過修改或者新增的時候才傳送, 否則略過
  2. 可以使用ssh 傳送, 防止傳送時檔案資料外洩
  3. 使用ssh 傳送也即是可以使用ssh key pair 作自動authorize, 不用輸入密碼
  4. 第一次的上傳可以使用ftp (會比用ssh 快, 第一次上傳25G 的資料可痛苦了...)

google 一下 "rsync windows",
便開始了一個竟然要花一星期空餘時間才完成的工作.....(是我太慢)
地雷相當的多...
而且網上的教學大都是本地linux 機, windows 機的實例少而且沒有詳盡說明...

rsync in windows 的實現方法有使用 deltacopy 或者 cygwin
但我的電腦使用 deltacopy 一直連不到 host, 可能是使用了 non-installer 的關係
我打開 deltacopy 發覺其實都是一個 cygwin
而且有現成的 rsync.exe ssh.exe 可以使用 (估計直接來自cygwin)
那唯有自己手動做命令行....

先試 rsync 命令: (有需要的話, 要手動加環境變數....)

rsync.exe -avz [localDir] [user]@[host]:[remoteDir]

輸入密碼
沒問題的話, remoteDir 內應該已經同步了 (可以先用細小的檔案試)
這樣便完成了手動的部份

要使用安全的連線, 當然是使用ssh

rsync.exe -avz [localDir] -e ssh [user]@[host]:[remoteDir]

但仍然要輸入密碼, 不能自動化
要免除輸入密碼, 便要使用ssh key 了
地雷都在這.....

要使用ssh key:

rsync.exe -avz [localDir] -e "ssh -i [private.ppk]" [user]@[host]:[remoteDir]

但一直不能正確的輸入passphrase
連沒有passphrase 的 key pair 都一直在問passphrase
這問題我一直不能解決
上網也找不到相同的個案...
PuTTygen 的key pair 在不知道原因之下,
ssh.exe 一定會問passphrase, 而我一直使用之前一直使用的 private key
一直問passphrase, 但明明 這private key 已經是沒有passphrase 的...

最後安裝了一個完整的cygwin, openssh 都沒有幫助
最後死氣的連command line keygen 都一併跟著做:
使用了cygwin 的 ssh-keygen (openssh package)

ssh-keygen -t rsa

rsync.exe -avz [localDir] -e "ssh -i [id_rsa]" [user]@[host]:[remoteDir]

天呀....

再schedule bat file:

FOR /f "tokens=1-4 delims= " %%D in ('echo %date:/= %') do set DATEN=%%F%%E%%D
rsync.exe -avz [localDir] -e "ssh -i [id_rsa]" [user]@[host]:[remoteDir] >> "log/backup_%DATEN%"
rsync.exe -avz log -e "ssh -i [id_rsa]" [user]@[host]:[remoteDir]/log

留意第一行是設定一個用日期作檔名的log file
第二行將rsync 的輸出寫到log file
最後將log file 都sync 到server
Google