首页 > 其他 > 详细

sersync文件实时同步

时间:2016-01-15 11:13:05      阅读:270      评论:0      收藏:0      [点我收藏+]


1、要实现的目的:

把主机A中 /data 目录中的数据实时同步到主机B中 /data 目录中

2、下载所需要的软件

sersync2.5.4

https://sersync.googlecode.com/files/sersync2.5.4_64bit_binary_stable_final.tar.gz


3、配置

在主机A上:

 解压后只有两个文件,sersync2,命令执行文件; confxml.xml,配置文件

[root@A sersync]# pwd

/usr/local/sersync

[root@A sersync]# ls

confxml.xml  sersync2

 查看命令执行文件的帮助信息;

[root@A sersync]# ./sersync2 -h

set the system param

execute:echo 50000000 > /proc/sys/fs/inotify/max_user_watches

execute:echo 327679 > /proc/sys/fs/inotify/max_queued_events

parse the command param

_______________________________________________________

参数-d:启用守护进程模式

参数-r:在监控前,将监控目录与远程主机用rsync命令推送一遍

c参数-n: 指定开启守护线程的数量,默认为10个

参数-o:指定配置文件,默认使用confxml.xml文件

参数-m:单独启用其他模块,使用 -m refreshCDN 开启刷新CDN模块

参数-m:单独启用其他模块,使用 -m socket 开启socket模块

参数-m:单独启用其他模块,使用 -m http 开启http模块

不加-m参数,则默认执行同步程序

________________________________________________________________

 通过命令帮助信息就知道要实现同步功能,只要执行以下命令就可以做到。

./sersync2 -d -r  

 如果有多个目录需要同步,那只要起多个进程然后用-o选项指定不同的配置文件。例如线上的配置:

/usr/local/sersync/bin/sersync -d -o /usr/local/sersync/conf/download.xml

/usr/local/sersync/bin/sersync -d -o /usr/local/sersync/conf/ddbill.xml

/usr/local/sersync/bin/sersync -d -o /usr/local/sersync/conf/dinpay.xml

 配置文件confxml.xml参数配置

   实现同步主要配置23-44行,  <sersync>.....</sersync> 中的内容

默认配置文件中的内容如下:

      <sersync>
         <localpath watch="/opt/tongbu">
             <remote ip="127.0.0.1" name="tongbu1"/>
             <!--<remote ip="192.168.8.39" name="tongbu"/>-->
             <!--<remote ip="192.168.8.40" name="tongbu"/>-->
         </localpath>
         <rsync>
             <commonParams params="-artuz"/>
             <auth start="false" users="root" passwordfile="/etc/rsync.pas"/>
             <userDefinedPort start="false" port="874"/><!-- port=874 -->
            <timeout start="false" time="100"/><!-- timeout=100 -->
             <ssh start="false"/>
         </rsync>
         <failLog path="/tmp/rsync_fail_log.sh" timeToExecute="60"/><!--default every 60mins execute once-->
         <crontab start="false" schedule="600"><!--600mins-->
             <crontabfilter start="false">
                 <exclude expression="*.php"></exclude>
                 <exclude expression="info/*"></exclude>
             </crontabfilter>
         </crontab>
         <plugin start="false" name="command"/>
     </sersync>

 

简单实现功能的话其实只要配置 

         <localpath watch="/opt/tongbu">
             <remote ip="127.0.0.1" name="tongbu1"/>
             <!--<remote ip="192.168.8.39" name="tongbu"/>-->
             <!--<remote ip="192.168.8.40" name="tongbu"/>-->
         </localpath>

这几行就可以了

 watch后面跟的就是本地要同步到远程的目录

 ip后面跟的就是远程主机的ip地址; name后面跟的是远程主机中rsync  daemon模式中rsyncd.conf文件中的模块名

 如果要同步到多台机器,就把每台机器写一个<remote> 标签

 

主机A中的配置文件修改如下:

[root@A sersync]# sed -n ‘24,28p‘ confxml.xml

<localpath watch="/data">

<remote ip="192.168.2.175" name="data"/>

</localpath>

<rsync>

<commonParams params="-artuz"/>

[root@A sersync]# 


在主机B上:

 配置/data目录为rsync daemon中的模块名和目录。

 rsyncd.conf简单配置如下

[root@B data]# cat /etc/rsyncd.conf 

uid=root

gid=root

max connections=36000

use chroot=no

log file=/var/log/rsyncd.log

pid file=/var/run/rsyncd.pid

lock file=/var/run/rsyncd.lock


[data]

path=/data

#ignore errors (开启会在日志中报错误)

read only = no

hosts allow = 192.168.2.0/24

hosts deny = *

 配置文件修改好了后就可以启动rsync daemon模式

[root@B data]# rsync --daemon

[root@B data]# ss -tlnp|grep 873

0      5                             :::873                          :::*      users:(("rsync",10042,5))

0      5                              *:873                           *:*      users:(("rsync",10042,4))

[root@B data]# 

 这样主机B就配置完毕了~

 

 现在再回到主机A中执行 ./sersync2 -d -r 命令启动实时同步.

 

[root@A sersync]# ./sersync2 -d -r

set the system param

execute:echo 50000000 > /proc/sys/fs/inotify/max_user_watches

execute:echo 327679 > /proc/sys/fs/inotify/max_queued_events

parse the command param

option: -d      run as a daemon

option: -r      rsync all the local files to the remote servers before the sersync work

daemon thread num: 10

parse xml config file

host ip : localhost     host port: 8008

daemon start,sersync run behind the console 

config xml parse success

please set /etc/rsyncd.conf max connections=0 Manually

sersync working thread 12  = 1(primary thread) + 1(fail retry thread) + 10(daemon sub threads) 

Max threads numbers is: 22 = 12(Thread pool nums) + 10(Sub threads)

please according your cpu ,use -n param to adjust the cpu rate

------------------------------------------

rsync the directory recursivly to the remote servers once

working please wait...

execute command: cd /data && rsync -artuz -R --delete ./ 192.168.2.175::data >/dev/null 2>&1 

run the sersync: 

watch path is: /data

[root@A sersync]# ps -ef|grep sersync2

root      21640      1  0 03:30 ?        00:00:00 ./sersync2 -d -r

4、演示


 现在我们进入主机A和主机B中的/data目录,做一些简单演示操作

[root@A /-19:38:31]#ls /data

[root@A /-19:38:38]#


[root@B /-19:38:32]#ls /data

[root@B /-19:38:42]#


[root@A /-19:39:48]#cd data

[root@A data-19:39:53]#touch 1 2 3 4 5 

[root@A data-19:40:15]#ls

1  2  3  4  5

[root@A data-19:40:21]#


[root@B /-19:39:49]#cd  data

[root@B data-19:39:56]#ls

1  2  3  4  5

[root@B data-19:40:23]#


[root@A data-19:41:43]#rm 1 2 3 -f

[root@A data-19:41:49]#ls

4  5

[root@A data-19:41:50]#


[root@B data-19:40:23]#ls

4  5



[root@A data-19:41:50]#echo 44444444 > 4

[root@A data-19:48:38]#echo 55555555 > 5

[root@A data-19:48:46]#cat 4 5 

44444444

55555555

[root@A data-19:48:53]#


[root@B data-19:49:14]#cat 4

44444444

[root@B data-19:49:16]#cat 5

55555555

[root@B data-19:49:18]#




sersync文件实时同步

原文:http://hjt353.blog.51cto.com/8636273/1735188

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!