Mysql数据库表定期备份的实现详解

作者:铭毅天下 时间:2024-01-24 11:24:35 

Mysql数据库表定期备份的实现

0.背景

实际开发环境中,前端程序需要在给定时间段内,将数据更新/插入到MySQL指定的库表中。随着数据量的增多,基础库表基数的增长,每更新一次都会有5s左右的卡顿。

改进方案一:批量更新,累计数10条或者100条进行一次更新入库操作;

改进方案二:将当前日期前1个月之前的数据进行备份操作,并删除当前库表中1个月前的数据。经测定,该方法一定程度提高了访问效率。根因:基础表基数少,查询效率相对提高。

1.库表的定时备份总结

步骤1:备份Mysql指定数据库中的制定库表。

使用 mysqldump,设定周期30天。

步骤2:对于日期60天前的已备份的文件及压缩包做删除处理。

步骤3:删除库表中在当前日期前30天的数据。(步骤1已经做了备份)。

步骤4:设定定时。

crontab设定。


[root@mysql_bak]# cat mysql_bak.sh
#!/bin/sh
#DATABASE INFO
DB_NAME="ppdb"
DB_USER="root"
DB_PASS="password"
DISPOSE_TABLE="dispose_ticles"
RST_TABLE="match_rst"
DB_IP=100.55.1.129

BIN_DIR="/usr/bin"
BAK_DIR="/home/mysql_bak/data"
DATE=`date +%Y%m%d_%H%M%S`

#mkdir -p $BAK_DIR
#备份包 形成压缩包
$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql
$BIN_DIR/mysqldump $DB_NAME $DISPOSE_TABLE | gzip > $BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql.gz

$BIN_DIR/mysqldump $DB_NAME $RST_TABLE > $BAK_DIR/$RST_TABLE.dump_$DATE.sql
$BIN_DIR/mysqldump $DB_NAME $RST_TABLE | gzip > $BAK_DIR/$RST_TABLE.dump_$DATE.sql.gz

#定期删除60天的备份包
find $BAK_DIR -name "name_*.sql.gz" -type f -mtime +60 -exec rm {} \; > /dev/null 2>&1

#30天前的指定库表数据删除操作 (当前时间减去30天)
delete_date=`date --date='30 day ago' +%Y-%m-%d`
echo "delete_date=$delete_date"

#删除rst表信息
rst_sql="delete from $RST_TABLE where update_time <= $delete_date order by update_time;";

echo "rst_sql=$rst_sql"
#ret=$(mysql -u $DB_USER -h ${DB_IP} -p${DB_PASS} $DB_NAME -e "$sql");
ret=$(mysql -h${DB_IP} $DB_NAME -e "$rst_sql");
echo $ret

#删除dispose表信息
dispose_sql="delete from $DISPOSE_TABLE where judge_time <= $delete_date order by judge_time;";
echo "dispose_sql=$dispose_sql"
ret=$(mysql -h${DB_IP} $DB_NAME -e "$dispose_sql");
echo $ret

2.定时设置:每隔30天的1点进行备份。


[root@mysql_bak]# cat /etc/crontab
SHELL=/bin/bash
PATH=/sbin:/bin:/usr/sbin:/usr/bin
MAILTO=root
HOME=/

# For details see man 4 crontabs

# Example of job definition:
# .---------------- minute (0 - 59)
# | .------------- hour (0 - 23)
# | | .---------- day of month (1 - 31)
# | | | .------- month (1 - 12) OR jan,feb,mar,apr ...
# | | | | .---- day of week (0 - 6) (Sunday=0 or 7) OR sun,mon,tue,wed,thu,fri,sat
# | | | | |
# * * * * * user-name command to be executed
0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1

[root@mysql_bak]# crontab -e
0 1 */30 * * /home/mysql_bak/mysql_bak.sh > /dev/null 2>&1

重启crontab服务


service crond restart

感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!

来源:http://blog.csdn.net/laoyang360/article/details/60347828

标签:定期备份,Mysql,数据库表
0
投稿

猜你喜欢

  • go语言数据类型之字符串string

    2024-04-26 17:19:52
  • Python实现一个简单三层神经网络的搭建及测试 代码解析

    2021-10-09 23:59:20
  • django celery redis使用具体实践

    2022-12-03 02:45:39
  • 最新解决没有NVSMI文件夹以及nvidia-smi‘ 不是内部或外部命令也不是可运行的程序或批处理文件

    2023-03-26 18:13:34
  • Python实现的手机号归属地相关信息查询功能示例

    2021-02-05 23:10:05
  • OpenCV学习之图像加噪与滤波的实现详解

    2022-09-20 04:40:57
  • Tensorflow2.1 MNIST图像分类实现思路分析

    2023-04-17 03:35:32
  • Perl实现的Linux下socket代理服务器

    2023-04-28 10:57:41
  • MySQL数据库之数据表操作

    2024-01-19 18:01:40
  • numpy实现RNN原理实现

    2023-09-21 23:47:33
  • vue服务器代理proxyTable配置如何解决跨域

    2024-04-28 09:22:32
  • 利用JavaScript做数独的完整实现过程

    2024-02-24 02:10:47
  • Python Socket编程之多线程聊天室

    2021-03-23 21:01:02
  • vue2.0 中#$emit,$on的使用详解

    2023-07-02 16:52:27
  • matplotlib绘制符合论文要求的图片实例(必看篇)

    2023-08-12 08:08:39
  • 对python中return与yield的区别详解

    2022-10-19 00:47:33
  • Go学习笔记之Zap日志的使用

    2023-09-19 01:21:36
  • vue3.0如何使用computed来获取vuex里数据

    2024-04-28 09:24:20
  • Gin golang web开发模型绑定实现过程解析

    2024-04-25 15:10:59
  • python+opencv图像分割实现分割不规则ROI区域方法汇总

    2021-04-25 01:50:54
  • asp之家 网络编程 m.aspxhome.com