最近由於業務上的考慮，把內容的點選數、播放數等變化頻換（每日1000W-2000w次）但是對於業務沒有太大實時意義的計數，由實時操作DB變更為只記錄操作日誌，每晚彙總各機器的操作日誌，計算各內容點選與播放的總數一次性更新DB，將DB的操作降低到百萬級別以內了。
這個過程中使用rsync來進行操作日誌的同步，為避免遺忘特記錄下配置rsync服務以及進行日誌檔案傳輸的過程。
機器以及配置過程如下：
192.168.1.100作為rsync伺服器，提供rsync服務；
192.168.1.101 、192.168.1.102 、192.168.1.103、192.168.1.104作為應用伺服器；
（1）配置rsync服務端（192.168.1.100）
當前的絕大多數Linux作業系統都安裝有rsnyc服務，如果不升級版本的話，可以直接使用，要是需要升級的話，可以參考網上教程。
檢查是否存在/etc/rsyncd.conf 檔案，不存在則建立，檔案的內容如下。

pid file = /var/run/rsyncd.pid
port = 873
#只監控內網的IP地址，更加安全
address = 192.168.1.100
uid =root
gid = root
use chroot = yes
#客戶端只能寫入不能讀取
read only = no
write only = yes
#只允許指定IP地址的機器能夠訪問
hosts allow = 192.168.1.101 192.168.1.102 192.168.1.103 192.168.1.104
max connections = 4
motd file = /etc/rsyncd/rsyncd.motd
timeout = 300
transfer logging = yes
log file = /var/log/rsync.log
#客戶端上傳檔案時候的儲存模組
[ logs ] 
        #客戶端上傳檔案的儲存地址
        path = /var/log/access_log  
        list = yes
        ignore errors
        auth users = zhangzk
        #密碼檔案
        secrets file = /etc/rsyncd/rsyncd.secrets
        exclude = error_log httpd.pid
 

建立密碼檔案 /etc/rsyncd/rsyncd.secrets，使用者名稱稱與密碼以冒號分割，整個檔案內容如下：

zhangzk:[email protected]

設定該檔案的600許可權

chmod 600 /etc/rsyncd/rsyncd.secrets

以守護程序方式啟動該服務：

/usr/local/bin/rsync --daemon
檢查服務是否執行正常：

-bash-3.2# ps -aef |grep rsync
root      8510  8481  0 18:30 pts/0    00:00:00 grep rsync
root     31787     1  0 Aug14 ?        00:00:00 rsync --daemon
 

至此服務端全部搞定了。

（2）客戶端（以192.168.1.101為例）

客戶端相對要簡單得多了，只需要設定密碼檔案即可。

建立密碼檔案/etc/rsyncd/ rsyncd.pass，該密碼檔案的內容與服務端的密碼檔案中的密碼必須一致。

[email protected]

設定該檔案的600許可權

chmod 600 /etc/rsyncd/rsyncd.pass

OK！現在可以使用rsync服務從客戶端192.168.1.101上無密碼的方式傳輸檔案到192.168.1.100上去了！

rsync -vzrtopg --delete --progress $tarFile [email protected]
 
::logs  --password-file=/etc/rsyncd/rsyncd.pass

（3）建立crontab任務來定時傳輸日誌檔案

檢查並且建立指令碼檔案/var/scripts/rsync_operate_log.sh

#!/bin/sh
fileName=my_play_download.log.`date -d yesterday +%Y-%m-%d`
filePath=/var/log/app/
logFile=$filePath$fileName

ipAddress=101

tarName=$fileName.$ipAddress.tar.gz
tarFile=$filePath$tarName



cd $filePath

if [ -e "$logFile" ]; then
  tar -zcvf $tarName $fileName;
else
  echo "log file not existed.file=$logFile"
fi

if [ -e "$tarFile" ]; then
   rsync -vzrtopg --delete --progress $tarFile [email protected]::logs  --password-file=/etc/rsyncd/rsyncd.pass
   rm -rf $tarFile
else
   echo "log file not existed.file=$tarFile"
fi

設定該crontab指令碼檔案的700許可權:

chmod 700 /var/scripts/rsync_operate_log.sh

再使用crontab -e命令來設定每日凌晨3點定時執行指令碼檔案即可：

0 3 * * * /var/scripts/rsync_operate_log.sh > /dev/null 2>&1