21andy这兄弟,还说备份呢,没有想到这两天他vps没挂,好像blog估计是挂了吧,这篇文章来自百度的快照,如下,值得参考和实践。
近半年,先后丢失5个网站数据,大多都是由于VPS硬盘损坏造成,RAID10为了速度是很不保险的
最近的2次分别是DirectSpace和BuyVM
所以,必需备份,作好VPS随时准备丢失数据的准备
昨天花了一整天,把目前所有的站做了每日同步,以下分享给大家实际操作方法。
转载请注明原文出处 http://www.21andy.com/blog/20120520/2026.html
网上关于rsync的资料也不少,但多数我想会把你看晕的,以下我用实例来讲解,重点的地方我会详细说明,希望让大家都会用。
以下,假设网站所在的VPS为A,存储备份的VPS为B,系统均为 CentOS
备份方法为 B 定时向 A 拉数据来备份
一、VPS A 上面的具体部署
1. 安装 rsync
yum -y install rsync
把rsync加入开机启动
echo 'rsync --daemon' >> /etc/rc.d/rc.local
2. 设置rsync密码
echo '你的用户名:你的密码' > /etc/rsyncd.scrt
chmod 600 /etc/rsyncd.scrt
这里的用户名和密码,在VPS B上将会用到
3. 配置rsync
vim /etc/rsyncd.conf
放入以下内容, #后面是我的注释
下载: rsyncd.conf
uid = root
gid = root
use chroot = no
read only = yes
max connections = 10
port = 873
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
#log file = /var/log/rsync.log # 偶不想记录log
log format = %t %a %m %f %b
syslog facility = local3
timeout = 300
[www]
path = /var/www/
comment = 21andy.com
ignore errors
read only = yes
list = no
auth users = andy
secrets file = /etc/rsyncd.scrt
#exclude = 21andy.com/blog/cache/ #不需要备份的目录,我使用exclude from方法来排除
exclude from = /etc/rsync_exclude.txt
hosts allow = 备份服务器的IP
hosts deny = *
4. 排除不备份的目录
vim /etc/rsync_exclude.txt
输入不备份的目录,每行一个,不可以用绝对路径,而必须用上面配置文件中path的相对路径,如
21andy.com/blog/cache/
21andy.com/manual/
这个排除文件有更高级的+-写法,我们不需要,简单够用就好,用 exclude from 方法,好处在于随时要添加不需要备份的内容时,方便添加,且不需要重启rsync进程
5. 制作一个重启rsync的脚本
vim /root/rsyncd_restart.sh
放入以下内容
kill -9 `cat /var/run/rsyncd.pid`
rm -f /var/run/rsyncd.pid
rm -f /var/run/rsyncd.lock
rsync --daemon
chmod 600 /root/rsyncd_restart.sh
chmod +x /root/rsyncd_restart.sh
现在直接用 /root/rsyncd_restart.sh 来重新启动 rsync 进程
6. 备份 MySQL 的脚本
此脚本可同时备份多个数据库,并进行gzip压缩,按日期目录保存,3天之前的备份将被自动删除
vim /root/mysql_backup.sh
下载: mysql_backup.sh
#!/bin/bash
# 以下配置信息请自己修改
mysql_user="USER" #MySQL备份用户
mysql_password="PASSWORD" #MySQL备份用户的密码
mysql_host="localhost"
mysql_port="3306"
mysql_charset="utf8" #MySQL编码
backup_db_arr=("db1" "db2") #要备份的数据库名称,多个用空格分开隔开 如("db1" "db2" "db3")
backup_location=/var/www/mysql #备份数据存放位置,末尾请不要带"/",此项可以保持默认,程序会自动创建文件夹
expire_backup_delete="ON" #是否开启过期备份删除 ON为开启 OFF为关闭
expire_days=3 #过期时间天数 默认为三天,此项只有在expire_backup_delete开启时有效
# 本行开始以下不需要修改
backup_time=`date +%Y%m%d%H%M` #定义备份详细时间
backup_Ymd=`date +%Y-%m-%d` #定义备份目录中的年月日时间
backup_3ago=`date -d '3 days ago' +%Y-%m-%d` #3天之前的日期
backup_dir=$backup_location/$backup_Ymd #备份文件夹全路径
welcome_msg="Welcome to use MySQL backup tools!" #欢迎语
# 判断MYSQL是否启动,mysql没有启动则备份退出
mysql_ps=`ps -ef |grep mysql |wc -l`
mysql_listen=`netstat -an |grep LISTEN |grep $mysql_port|wc -l`
if [ [$mysql_ps == 0] -o [$mysql_listen == 0] ]; then
echo "ERROR:MySQL is not running! backup stop!"
exit
else
echo $welcome_msg
fi
# 连接到mysql数据库,无法连接则备份退出
mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password <<end
use mysql;
select host,user from user where user='root' and host='localhost';
exit
end
flag=`echo $?`
if [ $flag != "0" ]; then
echo "ERROR:Can't connect mysql server! backup stop!"
exit
else
echo "MySQL connect ok! Please wait......"
# 判断有没有定义备份的数据库,如果定义则开始备份,否则退出备份
if [ "$backup_db_arr" != "" ];then
#dbnames=$(cut -d ',' -f1-5 $backup_database)
#echo "arr is (${backup_db_arr[@]})"
for dbname in ${backup_db_arr[@]}
do
echo "database $dbname backup start..."
`mkdir -p $backup_dir`
`mysqldump -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password $dbname --default-character-set=$mysql_charset | gzip > $backup_dir/$dbname-$backup_time.sql.gz`
flag=`echo $?`
if [ $flag == "0" ];then
echo "database $dbname success backup to $backup_dir/$dbname-$backup_time.sql.gz"
else
echo "database $dbname backup fail!"
fi
done
else
echo "ERROR:No database to backup! backup stop"
exit
fi
# 如果开启了删除过期备份,则进行删除操作
if [ "$expire_backup_delete" == "ON" -a "$backup_location" != "" ];then
#`find $backup_location/ -type d -o -type f -ctime +$expire_days -exec rm -rf {} \;`
`find $backup_location/ -type d -mtime +$expire_days | xargs rm -rf`
echo "Expired backup data delete complete!"
fi
echo "All database backup success! Think you!"
exit
fi
chmod 600 /root/mysql_backup.sh
chmod +x /root/mysql_backup.sh
好了,加入 crontab 每天00:00定时自动备份
00 00 * * * /root/mysql_backup.sh
至此,网站所在VPS A上的部署已经都完成了!接下来在备份VPS B上进行设置来拉备份。
转载请注明原文出处 http://www.21andy.com/blog/20120520/2026.html
二、VPS B 上面的具体部署
1. 安装 rsync
yum -y install rsync
这里不需要加入开机启动了,因为是客户端,不是服务端
2. 设置rsync密码
echo '你在A上设置的密码' > /etc/rsync.pass
chmod 400 /etc/rsync.pass
3. 测试一下同步
先建个存储备份的地方
mkdir -p /var/rsync/
测试一下同步
rsync -avzP --delete --password-file=/etc/rsync.pass 用户名@192.168.0.100::www /var/rsync/21andy.com/
这条命令,我说明一下几个要点
-avzP是啥,自己搜索我站内介绍
--delete 是为了比如A上删除了一个文件,同步的时候,B会自动删除那个文件
--password-file 刚才VPS B中 /etc/rsync.pass 设置那个密码,要和VPS A的 /etc/rsyncd.scrt 中的密码一样,这样cron运行的时候,就不需要密码了
这条命令中的"用户名"为VPS A的 /etc/rsyncd.scrt 中的用户名
这条命令中的 192.168.0.100 为VPS A的IP地址
::www,注意是2个 : 号,www为VPS A的配置文件 /etc/rsyncd.conf 中的[www],意思是根据A上的/etc/rsyncd.conf来同步其中的[www]段内容,一个 : 号的时候,用于不根据配置文件,直接同步指定目录
4. 加入crontab每天00:30同步
30 00 * * * rsync -avzP --delete --password-file=/etc/rsync.pass 用户名@192.168.0.100::www /var/rsync/21andy.com/ > /dev/null 2>&1
OK!至此大功告成!不怕丢数据了,天天自动备份!
如果还要再保险一点,再加个VPS C
C来同步B,双重备份,哪个挂了都不怕!
同时可以看:http://www.chinaz.com/web/2012/0116/232103.shtml
http://jingyan.baidu.com/article/67662997127cef54d51b84f5.html
http://hi.baidu.com/suercool/item/53406585050d76ded0f8cdaf
近半年,先后丢失5个网站数据,大多都是由于VPS硬盘损坏造成,RAID10为了速度是很不保险的
最近的2次分别是DirectSpace和BuyVM
所以,必需备份,作好VPS随时准备丢失数据的准备
昨天花了一整天,把目前所有的站做了每日同步,以下分享给大家实际操作方法。
转载请注明原文出处 http://www.21andy.com/blog/20120520/2026.html
网上关于rsync的资料也不少,但多数我想会把你看晕的,以下我用实例来讲解,重点的地方我会详细说明,希望让大家都会用。
以下,假设网站所在的VPS为A,存储备份的VPS为B,系统均为 CentOS
备份方法为 B 定时向 A 拉数据来备份
一、VPS A 上面的具体部署
1. 安装 rsync
yum -y install rsync
把rsync加入开机启动
echo 'rsync --daemon' >> /etc/rc.d/rc.local
2. 设置rsync密码
echo '你的用户名:你的密码' > /etc/rsyncd.scrt
chmod 600 /etc/rsyncd.scrt
这里的用户名和密码,在VPS B上将会用到
3. 配置rsync
vim /etc/rsyncd.conf
放入以下内容, #后面是我的注释
下载: rsyncd.conf
uid = root
gid = root
use chroot = no
read only = yes
max connections = 10
port = 873
pid file = /var/run/rsyncd.pid
lock file = /var/run/rsync.lock
#log file = /var/log/rsync.log # 偶不想记录log
log format = %t %a %m %f %b
syslog facility = local3
timeout = 300
[www]
path = /var/www/
comment = 21andy.com
ignore errors
read only = yes
list = no
auth users = andy
secrets file = /etc/rsyncd.scrt
#exclude = 21andy.com/blog/cache/ #不需要备份的目录,我使用exclude from方法来排除
exclude from = /etc/rsync_exclude.txt
hosts allow = 备份服务器的IP
hosts deny = *
4. 排除不备份的目录
vim /etc/rsync_exclude.txt
输入不备份的目录,每行一个,不可以用绝对路径,而必须用上面配置文件中path的相对路径,如
21andy.com/blog/cache/
21andy.com/manual/
这个排除文件有更高级的+-写法,我们不需要,简单够用就好,用 exclude from 方法,好处在于随时要添加不需要备份的内容时,方便添加,且不需要重启rsync进程
5. 制作一个重启rsync的脚本
vim /root/rsyncd_restart.sh
放入以下内容
kill -9 `cat /var/run/rsyncd.pid`
rm -f /var/run/rsyncd.pid
rm -f /var/run/rsyncd.lock
rsync --daemon
chmod 600 /root/rsyncd_restart.sh
chmod +x /root/rsyncd_restart.sh
现在直接用 /root/rsyncd_restart.sh 来重新启动 rsync 进程
6. 备份 MySQL 的脚本
此脚本可同时备份多个数据库,并进行gzip压缩,按日期目录保存,3天之前的备份将被自动删除
vim /root/mysql_backup.sh
下载: mysql_backup.sh
#!/bin/bash
# 以下配置信息请自己修改
mysql_user="USER" #MySQL备份用户
mysql_password="PASSWORD" #MySQL备份用户的密码
mysql_host="localhost"
mysql_port="3306"
mysql_charset="utf8" #MySQL编码
backup_db_arr=("db1" "db2") #要备份的数据库名称,多个用空格分开隔开 如("db1" "db2" "db3")
backup_location=/var/www/mysql #备份数据存放位置,末尾请不要带"/",此项可以保持默认,程序会自动创建文件夹
expire_backup_delete="ON" #是否开启过期备份删除 ON为开启 OFF为关闭
expire_days=3 #过期时间天数 默认为三天,此项只有在expire_backup_delete开启时有效
# 本行开始以下不需要修改
backup_time=`date +%Y%m%d%H%M` #定义备份详细时间
backup_Ymd=`date +%Y-%m-%d` #定义备份目录中的年月日时间
backup_3ago=`date -d '3 days ago' +%Y-%m-%d` #3天之前的日期
backup_dir=$backup_location/$backup_Ymd #备份文件夹全路径
welcome_msg="Welcome to use MySQL backup tools!" #欢迎语
# 判断MYSQL是否启动,mysql没有启动则备份退出
mysql_ps=`ps -ef |grep mysql |wc -l`
mysql_listen=`netstat -an |grep LISTEN |grep $mysql_port|wc -l`
if [ [$mysql_ps == 0] -o [$mysql_listen == 0] ]; then
echo "ERROR:MySQL is not running! backup stop!"
exit
else
echo $welcome_msg
fi
# 连接到mysql数据库,无法连接则备份退出
mysql -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password <<end
use mysql;
select host,user from user where user='root' and host='localhost';
exit
end
flag=`echo $?`
if [ $flag != "0" ]; then
echo "ERROR:Can't connect mysql server! backup stop!"
exit
else
echo "MySQL connect ok! Please wait......"
# 判断有没有定义备份的数据库,如果定义则开始备份,否则退出备份
if [ "$backup_db_arr" != "" ];then
#dbnames=$(cut -d ',' -f1-5 $backup_database)
#echo "arr is (${backup_db_arr[@]})"
for dbname in ${backup_db_arr[@]}
do
echo "database $dbname backup start..."
`mkdir -p $backup_dir`
`mysqldump -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password $dbname --default-character-set=$mysql_charset | gzip > $backup_dir/$dbname-$backup_time.sql.gz`
flag=`echo $?`
if [ $flag == "0" ];then
echo "database $dbname success backup to $backup_dir/$dbname-$backup_time.sql.gz"
else
echo "database $dbname backup fail!"
fi
done
else
echo "ERROR:No database to backup! backup stop"
exit
fi
# 如果开启了删除过期备份,则进行删除操作
if [ "$expire_backup_delete" == "ON" -a "$backup_location" != "" ];then
#`find $backup_location/ -type d -o -type f -ctime +$expire_days -exec rm -rf {} \;`
`find $backup_location/ -type d -mtime +$expire_days | xargs rm -rf`
echo "Expired backup data delete complete!"
fi
echo "All database backup success! Think you!"
exit
fi
chmod 600 /root/mysql_backup.sh
chmod +x /root/mysql_backup.sh
好了,加入 crontab 每天00:00定时自动备份
00 00 * * * /root/mysql_backup.sh
至此,网站所在VPS A上的部署已经都完成了!接下来在备份VPS B上进行设置来拉备份。
转载请注明原文出处 http://www.21andy.com/blog/20120520/2026.html
二、VPS B 上面的具体部署
1. 安装 rsync
yum -y install rsync
这里不需要加入开机启动了,因为是客户端,不是服务端
2. 设置rsync密码
echo '你在A上设置的密码' > /etc/rsync.pass
chmod 400 /etc/rsync.pass
3. 测试一下同步
先建个存储备份的地方
mkdir -p /var/rsync/
测试一下同步
rsync -avzP --delete --password-file=/etc/rsync.pass 用户名@192.168.0.100::www /var/rsync/21andy.com/
这条命令,我说明一下几个要点
-avzP是啥,自己搜索我站内介绍
--delete 是为了比如A上删除了一个文件,同步的时候,B会自动删除那个文件
--password-file 刚才VPS B中 /etc/rsync.pass 设置那个密码,要和VPS A的 /etc/rsyncd.scrt 中的密码一样,这样cron运行的时候,就不需要密码了
这条命令中的"用户名"为VPS A的 /etc/rsyncd.scrt 中的用户名
这条命令中的 192.168.0.100 为VPS A的IP地址
::www,注意是2个 : 号,www为VPS A的配置文件 /etc/rsyncd.conf 中的[www],意思是根据A上的/etc/rsyncd.conf来同步其中的[www]段内容,一个 : 号的时候,用于不根据配置文件,直接同步指定目录
4. 加入crontab每天00:30同步
30 00 * * * rsync -avzP --delete --password-file=/etc/rsync.pass 用户名@192.168.0.100::www /var/rsync/21andy.com/ > /dev/null 2>&1
OK!至此大功告成!不怕丢数据了,天天自动备份!
如果还要再保险一点,再加个VPS C
C来同步B,双重备份,哪个挂了都不怕!
同时可以看:http://www.chinaz.com/web/2012/0116/232103.shtml
http://jingyan.baidu.com/article/67662997127cef54d51b84f5.html
http://hi.baidu.com/suercool/item/53406585050d76ded0f8cdaf
作者:jackxiang@向东博客 专注WEB应用 构架之美 --- 构架之美,在于尽态极妍 | 应用之美,在于药到病除
地址:https://jackxiang.com/post/5953/
版权所有。转载时必须以链接形式注明作者和原始出处及本声明!
最后编辑: jackxiang 编辑于2013-1-18 23:17
评论列表