无论在哪里遇到你,我都会喜欢上你。 收藏本站
登陆 / 注册 搜索

阅读:6.5K   回复: 3

linux 安装使用备份软件 rsync

原创 [复制链接]
小执念 古黑浩劫论坛大牛 2019-6-9 13:17 |显示全部楼层

可遇不可求的事:故乡的云,上古的玉,随手的诗,十九岁的你。

管理员
一、 rsync 介绍

rsync 是一款开源的数据备份工具,(官网 https://rsync.samba.org/ ) 可以实现远程全备份及增量备份,也可以本地备份,今天主要讲远程备份。

二、使用场景
🖕🗽🍖🈷🦌‎
我有一个服务器,上面运行着网站(古黑论),我需要把这个服务器上的数据备份到另一台服务器上。如果你问我为什么要备份,那我无话可说...为了更好的理解 rsync 的备份过程,我把网站服务器称为“本机”,备份的服务器称为“备机”。

备份数据是从本机 >> 到备机的,所以备机上要监听 rsync 端口,就像学校保安大叔一样天天在校门口守住,看住门口,控制学生进出。

🤟🏠🍏⚛🐢‍当然也可以从备机上取回数据,这是个好消息也是个坏消息。

linux 安装使用备份软件 rsync rsync1.jpg

三、开始安装
🧑‍🎤‎🧢🎷🙄👍
使用命令
  1. rpm -qa rsync
复制代码

查询本机上是否安装了这个软件,出现 rsync-3.1.2-6.el7_6.1.x86_64 则表示已经安装了,如果没有安装,使用
  1. yum install rsync -y
复制代码

安装。好,本机上先做这些!
🤙🚗🌶🚷🐺‏
现在登陆备机,使用和上面一样的办法安装 rsync 。

我这里 yum 安装到的最新版本是 3.1.2 ,官网上说有漏洞,但也有修复方案,如果你不放心,可以去官网下载最新版。

🖕💈🫖‼🐠‎四。配置过程(烧脑过程)

备机上安装好之后,创建 rsync 用户,从本机上访问备机的权限,就是用这个用户的权限。
  1. useradd rsync -s /sbin/nologin -M
复制代码

编辑备机配置文件
🤛🦼🧊❗🐮‌
  1. vim /etc/rsyncd.conf
复制代码

在里面写入
  1. uid = rsync
  2. gid = rsync
  3. use chroot = no
    👊🎢🍞➡🐤‍
  4. max connections = 200
  5. pid file = /var/run/rsyncd.pid
  6. lock file = /var/run/rsync.lock
  7. log file = /var/log/rsync/rsyncd.log
  8. 🧑‍🎤‏💄🧲🙄✋


  9. timeout = 900
  10. ignore errors
  11. read only = false

  12. list = false

    👩‍✈️‏👚😥👊


  13. auth users = rsync-backup

  14. hosts allow = 192.3.3.3
  15. secrets file = /etc/rsync.password

  16. 🤛🚂🍊✡🐅‎
  17. [backup_www]
  18. path = /web/backup/www/

  19. [backup_data]
  20. path = /web/backup/data/
复制代码

🙌🏦🍖⚛🐂‍


解释:
全屏查看
  1. uid = rsync #刚才创建的用户名
  2. gid = rsync #用户组
  3. use chroot = no #若为 true,则 rsync 在传输文件之前首先 chroot 到 path 参数所指定的目录下。这样做的原因是实现额外的安全防护,但是缺点是需要 root 权限,并且不能备份指向 path 外部的符号连接所指向的目录文件🧑‍🍳‎👖🧲😥🤞

  4. max connections = 200 #设置最大连接数,默认为0,意思为无限制,负值为关闭这个模块
  5. port = 873 #默认监听端口
  6. pid file = /var/run/rsyncd.pid #rsync daemon启动后将其进程PID写入此文件
  7. lock file = /var/run/rsync.lock #指定loc文件用来支撑max connections的参数,使得总连接数不会超过限制

    👦‍👖🖌😪👆


  8. log file = /var/log/rsync/rsyncd.log #rsync的日志文件

  9. timeout = 900 #默认为0,意思为no timeout
  10. ignore errors #忽略IO错误
  11. read only = false #指定是否允许客户上传文件。若为 true 则不允许上传;若为 false 并且服务器目录也具有读写权限则允许上传
    🤛🌡🍍♀🐂‍

  12. list = false #是否允许客户端可以查看可用模块列表(类似ls),默认为true

  13. auth users = rsync-backup #指定由空格或逗号分隔的用户名列表,只有这些用户才允许连接该模块。这里的用户和系统用户没有任何关系。可以理解为一个秘密的东西,就像普通人不知道古黑论的站长是谁,只有特殊的人知道,才可以 py 交易
  14. 👩‍👞⚔😳🤞
  15. hosts allow = 192.3.3.3 #指定 ip 访问,可以使用 ip 段写法,如 121.40.0.0/15 多个 ip 用空格分开

  16. secrets file = /etc/rsync.password #指定用户名和密码存放的文件。这里的用户名和密码和系统用户也没有关系,其实可以理解成本机和备机之间的暗号,本机说“天王盖地虎”,备机回答“宝塔镇河妖”,两机之间就可以互相发送数据了。

  17. [backup_www] #这两个可以理解成房间号,有了这个号码,本机和备机才知道去哪里开房。方括号里面的可以自定义👨‍⚕️‏👞🧯😈👊
  18. path = /web/backup/www/ #文件保存位置

  19. [backup_data]
  20. path = /web/backup/data/
  21. 🧑‍🎤‌🥼🧪🥱👀
复制代码

我开始的时候看别人的教程,内心是崩溃的.....妈的怎么那么多用户账号,不知道是不是我的理解能力太差..

配置到这里就完成 80% 了。

👏🌕🎂‌

接下来创建用户、密码(暗号),就是上面的 secrets file = /etc/rsync.password
  1. echo "rsync-backup:password" > /etc/rsync.password
复制代码

rsync-backup 是账号
password 是密码,你先不要追究是什么的账号密码,先往下看。
👨‍⚕️‌🦺💶🙂🤟
更改密码文件权限
  1. chmod 600 /etc/rsync.password
复制代码

五、启动软件

我没看到这个软件有自带的启动/重启/关闭命令,网上倒是有人写了,但是我不想搞那么复杂,所以用系统自带的就 OK👨‍🎨‏👙🗡🙄🤛

启动:
  1. rsync --daemon
复制代码

启动后用:
  1. lsof -i :873
复制代码

💪⛪🍚✡🐮‌

看到 873 端口被监听,那就成功了。

关闭 rsync:
  1. pkill rsync
复制代码

添加开机启动:

🤛🏦🌰🈷🦟‍

  1. vim /etc/rc.d/rc.local
复制代码

写入:
  1. rsync --daemon
复制代码

加执行权限:
  1. chmod +x /etc/rc.d/rc.local
复制代码
🧑‍🍳‏🧢🔒😤🤞
六、准备备份工作

创建备机上的备份目录 :
  1. mkdir -p /web/backup/www/
复制代码

文件所有者改成:👦‍🩴🪓🤔👈
  1. chown -R rsync:rsync /web/backup/www/
复制代码

回到本机上,创建密码文件。注意这个密码要和备机上创建的一样,但是不需要用户名,只需要密码。

  1. echo "password" > /etc/rsync.password
复制代码

改权限:
🤟🛩🍍➡🕊‎
  1. chmod 600 /etc/rsync.password
复制代码

七、测试备份

在本机上创建测试文件..
  1. mkdir /test👮‍♂️‌👒🖨🤑✊
  2. touch /test/{1..9}
复制代码

.
可以看到在 /test/ 下创建了 9 个文件

如果有防火墙限制,先开放 873 端口,我的系统是 centos7 ,使用 firwall.
👂🚐🍊ℹ🐂‎
  1. firewall-cmd --zone=public --add-port=873/tcp --permanent
  2. firewall-cmd --reload
复制代码

.
然后在本机上执行
  1. rsync -arupogtvz  /test/ [email protected]::backup_www --password-file=/etc/rsync.password
复制代码

🤳🗼🍭🚭🐒‎-arupogtvz 是参数,下面再详细说
/test/ 是本机上刚才创建的测试目录
rsync-backup 是 /etc/rsyncd.conf 里面的 auth users = rsync-backup
119.2.2.2 是备机 ip
backup_www 是 /etc/rsyncd.conf 里面的 [backup_www] (开房的房间号)🧓‍🥾🪓🤡👍
--password-file=/etc/rsync.password 是本机上创建的密码文件

执行命令后,如果出现错误,请再看一遍配置过程,不要写错了,如果还有问题,就回复这个帖子,贴出你的错误信息。

八、定时备份👩‍✈️‎🧥📀🤔🧠

正式使用时,先用上面的命令备份一次,然后可以写个脚本每天定时备份
  1. vim /root/www_backup.sh
复制代码

写入:
  1. #!/bin/bash
    ✊🏫🫖✡🐶‎
  2. rsync -arupogtvz --delete /test/ [email protected]::backup_www --password-file=/etc/rsync.password
  3. exit 0
复制代码

添加定时任务:
  1. crontab -e
复制代码

写入:
👀🎠🥑🈳🐉‍
  1. 30 02  * * * /root/www_backup.sh
复制代码

每天 02:30 分执行一次备份任务

九、参数解释

🖐🧳🌰❓🦉‌-v, --verbose 详细模式输出。
-q, --quiet 精简输出模式。
-c, --checksum 打开校验开关,强制对文件传输进行校验。
-a, --archive 归档模式,表示以递归方式传输文件,并保持所有文件属性,等于-rlptgoD。
-r, --recursive 对子目录以递归模式处理。

👨‍🚒‌🥼📷🤡🖕


-R, --relative 使用相对路径信息。
-b, --backup 创建备份,也就是对于目的已经存在有同样的文件名时,将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
--backup-dir 将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX 定义备份文件前缀。
-u, --update 仅仅进行更新,也就是跳过所有已经存在于DST,并且文件时间晚于要备份的文件,不覆盖更新的文件。
🤟🏝🥚🅿🐖‎-l, --links 保留软链结。
-L, --copy-links 想对待常规文件一样处理软链结。
--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结。
--safe-links 忽略指向SRC路径目录树以外的链结。
-H, --hard-links 保留硬链结。🧓‏🛍🧻😪🙌
-p, --perms 保持文件权限。
-o, --owner 保持文件属主信息。
-g, --group 保持文件属组信息。
-D, --devices 保持设备文件信息。
-t, --times 保持文件时间信息。
💪🪐🥛✔🐯‍-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间。
-n, --dry-run现实哪些文件将被传输。
-w, --whole-file 拷贝文件,不进行增量检测。
-x, --one-file-system 不要跨越文件系统边界。
-B, --block-size=SIZE 检验算法使用的块尺寸,默认是700字节。
🤛🏝🥛♊🐒‌-e, --rsh=command 指定使用rsh、ssh方式进行数据同步。
--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息。
-C, --cvs-exclude 使用和CVS一样的方法自动忽略文件,用来排除那些不希望传输的文件。
--existing 仅仅更新那些已经存在于DST的文件,而不备份那些新创建的文件。
--delete 删除那些DST中SRC没有的文件。

🤞🪐🍽📵🦟‌

--delete-excluded 同样删除接收端那些被该选项指定排除的文件。
--delete-after 传输结束以后再删除。
--ignore-errors 及时出现IO错误也进行删除。
--max-delete=NUM 最多删除NUM个文件。
--partial 保留那些因故没有完全传输的文件,以是加快随后的再次传输。
🖕🏦🥩🆚🦚‎--force 强制删除目录,即使不为空。
--numeric-ids 不将数字的用户和组id匹配为用户名和组名。
--timeout=time ip超时时间,单位为秒。
-I, --ignore-times 不跳过那些有同样的时间和长度的文件。
--size-only 当决定是否要备份文件时,仅仅察看文件大小而不考虑文件时间。
👁🎢🦀🉑🦦‏--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口,默认为0。
-T --temp-dir=DIR 在DIR中创建临时文件。
--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份。
-P 等同于 --partial。
--progress 显示备份过程。
🦷⛵🍓♾🦋‎-z, --compress 对备份的文件在传输时进行压缩处理。
--exclude=PATTERN 指定排除不需要传输的文件模式。
--include=PATTERN 指定不排除而需要传输的文件模式。
--exclude-from=FILE 排除FILE中指定模式的文件。
--include-from=FILE 不排除FILE指定模式匹配的文件。

🧒‏🧢⚒🤔👏


--version 打印版本信息。
--address 绑定到特定的地址。
--config=FILE 指定其他的配置文件,不使用默认的rsyncd.conf文件。
--port=PORT 指定其他的rsync服务端口。
--blocking-io 对远程shell使用阻塞IO。

👨‍🚒‍🧣📡😅✊


-stats 给出某些文件的传输状态。
--progress 在传输时现实传输过程。
--log-format=formAT 指定日志文件格式。
--password-file=FILE 从FILE中得到密码。
--bwlimit=KBPS 限制I/O带宽,KBytes per second。🧑‍🚀‏👠🧯👍
-h, --help 显示帮助信息。



上一篇
下一篇
帖子热度 6549 ℃

小执念 古黑浩劫论坛大牛 2019-6-9 13:46 |显示全部楼层

可遇不可求的事:故乡的云,上古的玉,随手的诗,十九岁的你。

管理员
安全漏洞修复,在备机配置文件中加入
👀🚘🌰🈷🦚‍refuse options = protect-args
巴黎环抱的花海 「龙战于野」 2019-6-9 13:23 来自手机 |显示全部楼层

这个用户很懒,还没有填写自我介绍呢~

曾梦想仗剑走天涯,因太穷放弃了计划
渡年 「出类拔萃」 2019-6-10 16:14 来自手机 |显示全部楼层

这个用户很懒,还没有填写自我介绍呢~

--------本条消息来自银河中心,神圣而不可侵犯!
您需要登录后才可以回帖 登录 | 免费注册  

本版积分规则

快速回复 返回列表