rsync基础

网络服务-RSYNC

  1. rsync一款支持快速完全备份和增量备份工具,支持本地复制,远程同步等
    rsync一般使用两种协议进行数据同步:ssh 协议和rsync协议

  2. rsync的特性
    能更新整个目录树和文件系统
    有选择性的保留符号链接、硬链接、文件属性、权限、设备以及时间等
    对于安装来说,无任何特殊权限要求
    对于多个文件来说,文件传输效率高
    能用ssh或自定义端口作为传输入口的端口

  3. rsync工作原理
    既然涉及到数据同步,必要的两个概念是:源地址(文件),目标地址(文件),以及以哪一方为基准
    例如:
    想让目标主机上的文件和本地文件保持同步,则是以本地文件为同步基准,将本地文件作为源文件推送到目标主机上

    rsync在进行数据同步之前需要进行用户身份验证,验证方式取决于使用的连接方式

    ssh登录验证模式:使用ssh协议作为基础进行用户身份认证,然后进行数据同步
    rsync登录验证模式:使用rsync协议进行用户身份认证(非系统用户),然后进行数据同步

    数据同步方式:推送(上传)、拉取(下载)

    NFS服务器------------------>rsync服务器(nfs服务器数据改变,rsync服务器为了与nfs服务器同步,就会拉取nfs服务器的数据)
    NFS服务器<------------------rsync服务器(当nfs服务器数据丢失,nfs服务器为了与rsync服务器同步,rsync就会推送数据到nfs服务器)

  4. rsync实验演示
    单向数据同步实验:准备两台服务器,一台NFS服务器作为网站的数据服务器(基准服务器),另外一台专门做rsync数据备份服务器

4.1 ssh协议数据同步:将NFS服务器数据同步备份到rsync服务器
在两台服务器分别创建目录(/filesrc、/filedst)

下行同步(下载)
格式: rsync -avz  服务器地址:/服务器目录/*   /本地目录
实例: rsync -avz  root@192.168.88.10:/filesrc/*   /filedst
           -a:归档模式,递归并保留对象属性
           -v:显示同步过程
           -z:在传输文件时进行压缩

[root@dst ~]# mkdir /filedst
[root@src filesrc]# touch {1..5}.txt
[root@dst ~]# rsync -avz root@192.168.88.200:/filesrc/* /filedst/   #在dst服务器上下载src服务器上的文件
[root@dst filedst]# ls
1.txt  2.txt  3.txt  4.txt  5.txt

[root@src filesrc]# rm -rf *   #删除src服务器上的文件
[root@dst filedst]# rsync -avz /filedst/* root@192.168.88.200:/filesrc/   #在dst服务器上传文件到src服务器上
[root@src filesrc]# ls           #查看上传的文件
1.txt  2.txt  3.txt  4.txt  5.txt

注意:使用root用户进行实验可以,但在生产环境中尽量使用单独创建的普通用户,减少权限溢出
        创建用来做数据同步的用户,并给予用户对目录的相应权限,一般使用ACL权限
[root@src filesrc]# useradd zhangsan
  [root@src filesrc]# passwd zhangsan
  setfacl -m u:zhangsan:rwx /filesrc/
        
  拓展:若实现免密码数据同步,只需要做好ssh密钥互信即可
        [root@src filesrc]# ssh-keygen 
        [root@src filesrc]# ssh-copy-id root@192.168.88.10
        [root@src filesrc]# rm -rf *
        [root@dst filedst]# ssh-keygen 
        [root@src filedst]# ssh-copy-id root@192.168.88.200
        [root@dst filedst]# rsync -avz /filedst/* root@192.168.88.200:/filesrc/
        [root@src filesrc]# ls
        1.txt  2.txt  3.txt  4.txt  5.txt

4.2 rsync协议数据同步:将NFS服务器数据同步备份到rsync服务器
   搭建rsync服务(仅需要在NFS服务器上搭建即可)
   a. 创建主配置文件(/etc/rsyncd.conf)
   
   [root@src ~]# vim /etc/rsyncd.conf
   
   address = 192.168.88.200
   # rsync服务器绑定IP
   
   port 873
   # 默认服务端口873
   
   log file = /var/log/rsyncd.log
  # 日志文件位置
  
  pid file = /var/run/rsyncd.pid
  # 进程号文件位置
  
  [web]
  # 共享名:用来连接是写在url上的,切记
  
  comment = web directory backup
  # 共享描述话语
  
  path = /filesrc
  # 实际共享目录
  
  read only = no
  # 是否仅允许读取
  
  dont compress = *.gz *.bz2
  # 哪些文件类型不进行压缩
  
  auth users = user1
  # 登录用户名(非系统用户,需要自行创建)
   
   secrets file = /etc/rsyncd_users.db
  # 认证所需账号密码文件(需自行创建)

  b. 创建认证所需账户密码文件
  [root@src ~]# vim /etc/rsyncd_users.db
   user1:123456
  [root@src ~]# chmod 600 /etc/rsyncd_users.db 
  
  c. 启动服务
  [root@src ~]# rsync --daemon
  [root@src ~]# netstat -antp | grep :873
  tcp        0      0 192.168.88.200:873      0.0.0.0:*               LISTEN      32112/rsync 
  
  d. 设置映射用户对共享目录有权限(r)
  [root@src ~]# setfacl -m u:nobody:rwx /filesrc/
  注意:关闭服务可使用kill命令,但偶尔会造成服务被结束,但进程号配置文件不被删除的问题,可以手动删除,再启动则正常(建议写一个rsync的服务管理脚本)
  
  下行同步(下载)
  格式: rsync -avz  rsync://用户名@服务器地址/共享模块名   /本地目录
  示例: rsync -avz  rsync://user1@192.168.88.200/web  /filedst

  拓展:--delete:删除本地比服务器多出来的文件(源地址没有,目标地址有的删掉)
            rsync -avz --delete rsync://user1@192.168.88.200/web  /filedst

  上行同步(上传)
  格式:rsync -avz  /本地目录/* rsync://用户名@服务器地址/共享模块名
  示例:rsync -avz  /filedst/* rsync://user1@192.168.88.200/web
  拓展:rsync协议的免密码可以借助一个环境变量实现
  # export RSYNC_PASSWORD=虚拟用户密码(客户端生成)
  
  [root@src filesrc]# touch 6.txt
  [root@src filesrc]# ls
  1.txt  2.txt 3.txt    4.txt 5.txt 6.txt  rsyncd.conf.bak


  [root@dst filedst]# rm -rf *
  [root@dst filedst]# rsync -avz rsync://user1@192.168.88.200/web /filedst/
  [root@dst filedst]# ls
  1.txt  2.txt  3.txt  4.txt  5.txt  6.txt  rsyncd.conf.bak
  [root@dst filedst]# touch 7.txt
  rsync -avz rsync://user1@192.168.88.200/web /filedst/  
  [root@src filesrc]# ls
  1.txt  2.txt 3.txt  4.txt 5.txt 6.txt  rsyncd.conf.bak   #同步不成功没有7.txt
  [root@dst filedst]# rsync -avz --delete rsync://user1@192.168.0/web /filedst/
  [root@dst filedst]# ls
  1.txt  2.txt  3.txt  4.txt  5.txt  6.txt  rsyncd.conf.bak    #7.txt 被删除,服务器端没有的,本地服务器也应该没有,保持本地与服务器同步一致
  [root@src filesrc]# rm -rf *
  rsync -avz /filedst/* rsync://user1@192.168.88.200/web
  [root@src filesrc]# ls
  1.txt  2.txt  3.txt  4.txt  5.txt  6.txt  rsyncd.conf.bak
  [root@dst filedst]# export RSYNC_PASSWORD=123456
  [root@dst filedst]# rm -rf  *
  [root@dst filedst]# touch {a..f}.txt
  [root@dst filedst]# ls
  a.txt  b.txt  c.txt  d.txt  e.txt  f.txt
  [root@dst filedst]# rsync -avz --delete rsync://user1@192.168.88.200/web /filedst/
  [root@dst filedst]# ls
  1.txt  2.txt  3.txt  4.txt  5.txt  6.txt  rsyncd.conf.bak





  

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 202,980评论 5 476
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,178评论 2 380
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 149,868评论 0 336
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,498评论 1 273
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,492评论 5 364
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,521评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,910评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,569评论 0 256
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,793评论 1 296
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,559评论 2 319
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,639评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,342评论 4 318
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,931评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,904评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,144评论 1 259
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 42,833评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,350评论 2 342