rsync临时文件(rsync传输文件)
如何使用vzdump克隆/备份/恢复OpenVZ虚拟机
1 前言
我在这篇文章中使用两个OpenVZ服务器:
Server1.example.com:IP
192.168.0,100
Server2.example.com:IP
192.168.0.101
(两台都使用的是Debian
Etch的系统，设置的过程大家可以参考这篇教程Installing
And Using OpenVZ On Debian Etch-但是vzdump同时也支持其他版本的linux)
我在server1.example.com服务器上运行着一个主机名为test.example.com的虚拟机，它的ip地址是192.168.1.102且他的VEID是102.我想备份这个虚拟机，并把它恢复在server2.example.com这台服务器上。
我们可以原封不动的把虚拟机恢复在server2.example.com的服务器上(例如相同的ip地址和主机名)，但是运行克隆在server2的虚拟机时，我们必须停止在server1.example.com服务器上的虚拟机。否则的话，ip地址和主机名将会冲突;第二种方法我们在恢复虚拟机之前，使用vzctl
set命令改变一些参数例如ip地址和主机名。这样的话，我们可以同时运行两个虚拟机（原本运行在server1.example.com上的虚拟机和克隆在server2.example.com）第二种方法是克隆虚拟机的最好的方法。
2.准备OpenVz服务器
首先我们必须安装Vzdump和它所依赖的rsync，在debian系统中，命令如下：
server1/server2:
apt-get install vzdump rsync
方法2：
?
1
2
3
wget
apt-get install cstream ssmtp
dpkg -i vzdump_1.2-4_all.deb
3创建一个虚拟机的备份
这一章仅需要在server1服务器上操作就可以了
在server1.example.com上，想创建一个VEID为102的虚拟机的备份，先看一下vzdump的帮助
man vzdump
来学习下如何使用vzdump.
要备份你服务器上所有的虚拟机，你可以使用下列命令
vzdump –compress –dumpdir /home/backup –stop
–all
–compress 意思是:
压缩备份的文件 (压缩为一个.tgz文件).
–dumpdir确定你想存储备份的文件夹，如果你不定义一个dumpdir，默认为/vz/dump或者/var/lib/vz/dump（依赖你的版本）。
–stop
停止虚拟机，常见备份，然后启动虚拟机。如果你使用—stop你的虚拟机将会停掉几分钟.一个更快的方案是你使用…
–suspend:挂起虚拟机，虚拟机备份这时会拷贝via
rsync到一个临时文件.虚拟机将会在定调几秒后立刻得以恢复，然后这个dump被创建使用的是临时文件夹下的拷贝。我推荐使用这种方法如果你不想等太久的话。
你也可以省去–stop 和
–suspend直接备份一个正在运行的虚拟机，大多数情况下这是没有问题的，但是可能会使备份不同意，因此请慎用!
–all创建所有可用虚拟机的备份，如果你想备份一个特定虚拟机的备份，使用虚拟机的VEID来替换。
要想把创建VEID为102的虚拟机备份在/home/backup，并且想在备份的时候停止虚拟机，使用下列命令
vzdump –compress –dumpdir /home/backup –stop
102
要想创建一个dump到默认文件夹（/vz/dump
or /var/lib/vz/dump），使用命令
vzdump
–compress –stop 102
输出结果将会如下所示
server1:/vz/dump# vzdump –compress –stop 102
INFO:
starting backup for VPS 102
(/var/lib/vz/private/102)
INFO: starting first sync /var/lib/vz/private/102
to /var/lib/vz/dump/tmp9009
INFO: stopping vps
Stopping
container …
Container was stopped
Container is unmounted
INFO: final
sync /var/lib/vz/private/102 to /var/lib/vz/dump/tmp9009
INFO:
restarting vps
Starting
container …
Container is mounted
Adding IP address(es):
192.168.0.102
Setting CPU units: 1000
Configure meminfo: 65536
Set
hostname: test.example.com
File resolv.conf was modified
Container start
in progress…
INFO: vps is online again after 15 seconds
INFO: Creating
archive ‘/var/lib/vz/dump/vzdump-102.tgz’
(/var/lib/vz/dump/tmp9009/102)
Total bytes written: 340428800 (325MiB,
11MiB/s)
INFO: backup for VPS 102 finished
successful (1.37 minutes)
server1:/vz/dump#
不像停止，仅仅挂起虚拟机，使用命令
vzdump –compress –suspend 102
输出结果如下所示
server1:~# vzdump –compress –suspend 102
INFO: starting backup for VPS 102 (/var/lib/vz/private/102)
INFO: starting first sync /var/lib/vz/private/102 to /var/lib/vz/dump/tmp10842
INFO: suspend vps
Setting up checkpoint…
suspend…
get context…
Checkpointing completed succesfully
INFO: final sync /var/lib/vz/private/102 to /var/lib/vz/dump/tmp10842
INFO: resume vps
Resuming…
INFO: vps is online again after 4 seconds
INFO: Creating archive ’/var/lib/vz/dump/vzdump-102.tgz’ (/var/lib/vz/dump/tmp10842/102)
Total bytes written: 340428800 (325MiB, 24MiB/s)
INFO: backup for VPS 102 finished successful (1.57 minutes)
server1:~#
在备份之后，我们看一下dump的目录…
ls -l /vz/dump/
你将会看到一个以.tgz为后缀的文件:
server1:~# ls -l /vz/dump/
total 147864
-rw-r–r– 1 root root 1170 2008-11-20 17:40 vzdump-102.log
-rw-r–r– 1 root root 151249685 2008-11-20 17:40 vzdump-102.tgz
server1:~#
你现在就可以拷贝这个dump到其他的OpenVZ服务器上了，使用scp把/vz/dump/vzdump-102.tgz这个备份拷贝到server2.example.com的/home文件夹下）；
scp /vz/dump/vzdump-102.tgz root@192.168.0.101 :/home
4.恢复一个虚拟机
（这一章仅仅是针对server2的!）
在server2.example.com,你现在就可以恢复这个虚拟机了,使用下列命令….
vzrestore /vz/dump/vzdump-101.tar 101
在这里250是恢复虚拟机新的VEID-你也可以使用任何在server2.example.com上没有被使用的VEID-你甚至可以再次使用102，如果server2.example.com上没有使用的话。
如果你不想修改虚拟机的设置（例如。Ip地址,主机名）,你现在就可以启动它了,但是请确认在server1.example.com上的原始的虚拟机已经停止，否则会导致ip冲突。
vzctl start 250
如果你想同时运行两个虚拟机(原始的和克隆的)，你必须克隆虚拟机启动前改变其ip地址和主机名.
要设置一个新的主机名，运行下列命令:
vzctl set 250 –hostname test2.example.com
–save
要设置一个新的ip地址，我们必须先删除原来的。
vzctl set 250 –ipdel 192.168.0.102 –save
然后我们设置一个新的
vzctl set 250 –ipadd 192.168.0.250 –save
最后我们就可以启动克隆的虚拟机了。
转载
详解rsync，一款卓越的增量同步工具（一）
Rsync (remote rsync) 是可以实现 增量备份 的远程（和本地）文件复制工具，目的是实现本地主机和远程主机上的文件同步(包括本地推到远程，远程拉到本地两种同步方式)，也可以实现本地不同路径下（不同目录、分区之间）文件的同步，但不能实现远程路径1到远程路径2之间的同步(scp可以实现)。配合计划任务，rsync能实现 定时或周期同步 ；配合inotify或sersync，可以实现触发式的 实时同步 。
本篇文章主要介绍rsync的使用方法和它常用的功能。
rsync官方网站:
不考虑rsync的实现细节，就文件同步而言，涉及了源文件和目标文件的概念，还涉及了以哪边文件为同步基准。例如，想让目标主机上的文件和本地文件保持同步，则是以本地文件为同步基准，将本地文件作为源文件推送到目标主机上。反之，如果想让本地主机上的文件和目标主机上的文件保持同步，则目标主机上的文件为同步基准，实现方式是将目标主机上的文件作为源文件拉取到本地。当然，要保持本地的两个文件相互同步，rsync也一样能实现，这就像Linux中cp命令一样，以本地某文件作为源，另一文件作为目标文件，但请注意，虽然rsync和cp能达到相同的目的，但它们的实现方式是不一样的。
既然是文件同步，在同步过程中必然会涉及到源和目标两文件之间版本控制的问题，例如是否要删除源主机上没有但目标上多出来的文件，目标文件比源文件更新(newer than source)时是否仍要保持同步，遇到软链接时是拷贝软链接本身还是拷贝软链接所指向的文件，目标文件已存在时是否要先对其做个备份等等。
rsync同步过程中由两部分模式组成：决定哪些文件需要同步的检查模式以及文件同步时的同步模式。
(1).检查模式是指按照指定规则来检查哪些文件需要被同步，例如哪些文件是明确被排除不传输的。默认情况下，rsync使用"quick check"算法快速检查源文件和目标文件的大小、mtime(修改时间)是否一致，如果不一致则需要传输。当然，也可以通过在rsync命令行中指定某些选项来改变quick check的检查模式，比如"--size-only"选项表示"quick check"将仅检查文件大小不同的文件作为待传输文件。rsync支持非常多的选项，其中检查模式的自定义性是非常有弹性的。
(2).同步模式是指在文件确定要被同步后，在同步过程发生之前要做哪些额外工作。例如上文所说的是否要先删除源主机上没有但目标主机上有的文件，是否要先备份已存在的目标文件，是否要追踪链接文件等额外操作。rsync也提供非常多的选项使得同步模式变得更具弹性。
相对来说，为rsync手动指定同步模式的选项更常见一些，只有在有特殊需求时才指定检查模式，因为大多数检查模式选项都可能会影响rsync的性能。
以下是rsync的语法：
由此语法可知，rsync有三种工作方式：
(1).本地文件系统上实现同步。命令行语法格式为上述"Local"段的格式。
(2).本地主机使用远程shell和远程主机通信。命令行语法格式为上述"Access via remote shell"段的格式。
(3).本地主机通过网络套接字连接远程主机上的rsync daemon。命令行语法格式为上述"Access via rsync daemon"段的格式。
前两者的本质是通过管道通信，即使是远程shell。而方式(3)则是让远程主机上运行rsync服务，使其监听在一个端口上，等待客户端的连接。
但是，还有第四种工作方式：
(4).通过远程shell也能临时启动一个rsync daemon，这不同于方式(3)，它不要求远程主机上事先启动rsync服务，而是临时派生出rsync daemon，它是单用途的一次性daemon，仅用于临时读取daemon的配置文件，当此次rsync同步完成，远程shell启动的rsync daemon进程也会自动消逝。此通信方式的命令行语法格式同"Access via rsync daemon"，但要求options部分必须明确指定"--rsh"选项或其短选项"-e"。
如需源码安装，请关注即将发布的《详解Rsync，一款卓越的增量同步工具（二）》
系统环境：
服务器配置：阿里云ECS 11G
操作系统：CentOS7.2
rsync 版本：3.1.2
rsync 服务器：rsync-server （10.168.152.72）
rsync 客户端：rsync-client （10.117.217.172）
检查rsync 是否已经安装
若已安装，无需重新安装；若未安装，用以下命令安装：
写入以下配置到该文件：
输入，格式是“用户名:口令”，用户不要求是系统用户
root:pwd123456
输入：
======welcome to synchronize appdata======
如果rsync启动成功，可以看到873端口已经在监听了。
检查rsync 是否已经安装
若已安装，无需重新安装；若未安装，用以下命令安装：
更多同步数据的场景演示，请关注即将发布的《详解Rsync，一款卓越的增量同步工具（二）》
配置文件 rsyncd.conf 由全局配置和若干模块配置组成。配置文件的语法为：
全局参数
在文件中 [module] 之外的所有配置行都是全局参数。当然也可以在全局参数部分定义模块参数，这时该参数的值就是所有模块的默认值。
模块参数
模块参数主要用于定义 rsync 服务器哪个目录要被同步。模块声明的格式必须为 [module] 形式，这个名字就是在 rsync 客户端看到的名字，类似于 Samba 服务器提供的共享名。而服务器真正同步的数据是通过 path 来指定的。可以根据自己的需要，来指定多个模块，模块中可以定义以下参数：
a. 基本模块参数
b. 模块控制参数
c. 模块文件筛选参数
d. 模块用户认证参数
e. 模块访问控制参数
客户主机列表定义可以是以下形式：
f. 模块日志参数
设置了”log file”参数时，在日志每行的开始会添加”%t [%p]“。
可以使用的日志格式定义符如下所示：
Linux下rsync命令用法
rsync是一个功能非常强大的工具，其命令也有很多功能特色选项，我们下面就对它的选项一一详细说明
在对rsync服务器配置结束以后，下一步就需要在客户端发出rsync命令来实现将服务器端的文件备份到客户端来。rsync是一个功能非常强大的工具，其命令也有很多功能特色选项，我们下面就对它的选项一一进行分析说明。
Rsync的命令格式可以为以下六种：
rsync [OPTION]... SRC DEST
rsync [OPTION]... SRC [USER@]HOST:DEST
rsync [OPTION]...
[USER@]HOST:SRC DEST
rsync [OPTION]... [USER@]HOST::SRC DEST
rsync
[OPTION]... SRC [USER@]HOST::DEST
rsync [OPTION]...
rsync://[USER@]HOST[:PORT]/SRC [DEST]
对应于以上六种命令格式，rsync有六种不同的工作模式：
1)拷贝本地文件。当SRC和DES路径信息都不包含有单个冒号":"分隔符时就启动这种工作模式。如：rsync -a /data /backup
2)使用一个远程shell程序(如rsh、ssh)来实现将本地机器的内容拷贝到远程机器。当DST路径地址包含单个冒号":"分隔符时启动该模式。如：rsync
-avz *.c foo:src
3)使用一个远程shell程序(如rsh、ssh)来实现将远程机器的内容拷贝到本地机器。当SRC地址路径包含单个冒号":"分隔符时启动该模式。如：rsync
-avz foo:src/bar /data
4)从远程rsync服务器中拷贝文件到本地机。当SRC路径信息包含"::"分隔符时启动该模式。如：rsync -av
root@172.16.78.192::www /databack
5)从本地机器拷贝文件到远程rsync服务器中。当DST路径信息包含"::"分隔符时启动该模式。如：rsync -av /databack
root@172.16.78.192::www
6)列远程机的文件列表。这类似于rsync传输，不过只要在命令中省略掉本地机信息即可。如：rsync
-v rsync://172.16.78.192/www
rsync参数的具体解释如下：
-v,
--verbose 详细模式输出
-q, --quiet 精简输出模式
-c, --checksum 打开校验开关，强制对文件传输进行校验
-a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD
-r, --recursive
对子目录以递归模式处理
-R, --relative 使用相对路径信息
-b, --backup
创建备份，也就是对于目的已经存在有同样的文件名时，将老的文件重新命名为~filename。可以使用--suffix选项来指定不同的备份文件前缀。
--backup-dir 将备份文件(如~filename)存放在在目录下。
-suffix=SUFFIX 定义备份文件前缀
-u,
--update 仅仅进行更新，也就是跳过所有已经存在于DST，并且文件时间晚于要备份的文件。(不覆盖更新的文件)
-l, --links 保留软链结
-L, --copy-links 想对待常规文件一样处理软链结
--copy-unsafe-links 仅仅拷贝指向SRC路径目录树以外的链结
--safe-links 忽略指向SRC路径目录树以外的链结
-H, --hard-links 保留硬链结
-p, --perms
保持文件权限
-o, --owner 保持文件属主信息
-g, --group 保持文件属组信息
-D, --devices
保持设备文件信息
-t, --times 保持文件时间信息
-S, --sparse 对稀疏文件进行特殊处理以节省DST的空间
-n,
--dry-run现实哪些文件将被传输
-W, --whole-file 拷贝文件，不进行增量检测
-x, --one-file-system
不要跨越文件系统边界
-B, --block-size=SIZE 检验算法使用的块尺寸，默认是700字节
-e, --rsh=COMMAND
指定使用rsh、ssh方式进行数据同步
--rsync-path=PATH 指定远程服务器上的rsync命令所在路径信息
-C,
--cvs-exclude 使用和CVS一样的方法自动忽略文件，用来排除那些不希望传输的文件
--existing
仅仅更新那些已经存在于DST的文件，而不备份那些新创建的文件
--delete 删除那些DST中SRC没有的文件
--delete-excluded 同样删除接收端那些被该选项指定排除的文件
--delete-after 传输结束以后再删除
--ignore-errors 及时出现IO错误也进行删除
--max-delete=NUM 最多删除NUM个文件
--partial
保留那些因故没有完全传输的文件，以是加快随后的再次传输
--force 强制删除目录，即使不为空
--numeric-ids
不将数字的用户和组ID匹配为用户名和组名
--timeout=TIME IP超时时间，单位为秒
-I, --ignore-times
不跳过那些有同样的时间和长度的文件
--size-only 当决定是否要备份文件时，仅仅察看文件大小而不考虑文件时间
--modify-window=NUM 决定文件是否时间相同时使用的时间戳窗口，默认为0
-T --temp-dir=DIR
在DIR中创建临时文件
--compare-dest=DIR 同样比较DIR中的文件来决定是否需要备份
-P 等同于 --partial
--progress 显示备份过程
-z, --compress 对备份的文件在传输时进行压缩处理
--exclude=PATTERN
指定排除不需要传输的文件模式
--include=PATTERN 指定不排除而需要传输的文件模式
--exclude-from=FILE
排除FILE中指定模式的文件
--include-from=FILE 不排除FILE指定模式匹配的文件
--version 打印版本信息
--address 绑定到特定的地址
--config=FILE 指定其他的配置文件，不使用默认的rsyncd.conf文件
--port=PORT 指定其他的rsync服务端口
--blocking-io 对远程shell使用阻塞IO
-stats
给出某些文件的传输状态
--progress 在传输时现实传输过程
--log-format=formAT 指定日志文件格式
--password-file=FILE 从FILE中得到密码
--bwlimit=KBPS 限制I/O带宽，KBytes per second
-h, --help 显示帮助信息
请教rsync排除目录的问题
首先，让我们创建一个名为“excluded”的文件（当然，你想取什么名都可以），然后将我们想要排除的文件夹或文件写入该文件，一行一个。在我们的例子中，如果你想要对根分区进行完整的备份，你应该排除一些在启动时创建的设备目录和放置临时文件的目录，列表看起来像下面这样：
然后，你可以运行以下命令来备份系统：
从命令行排除文件
你也可以从命令行直接排除文件，该方法在你要排除的文件数量较少，并且在你想要将它写成脚本或加到crontab中又不想脚本或cron依赖于另外一个文件运行时十分有用。
例如，如果你想要同步/var到一个备份目录，但是你不想要包含cache和tmp这些通常不会有重要内容的文件夹，你可以使用以下命令：
该命令易于在脚本或cron中使用，也不会依赖其它文件。