MySQL数据库优化之分表分库操作实例详解

作者:小飞侠v科比 时间:2024-01-20 10:33:53 

本文实例讲述了MySQL数据库优化之分表分库操作。分享给大家供大家参考,具体如下:

分表分库

垂直拆分

垂直拆分就是要把表按模块划分到不同数据库表中(当然原则还是不破坏第三范式),这种拆分在大型网站的演变过程中是很常见的。当一个网站还在很小的时候,只有小量的人来开发和维护,各模块和表都在一起,当网站不断丰富和壮大的时候,也会变成多个子系统来支撑,这时就有按模块和功能把表划分出来的需求。其实,相对于垂直切分更进一步的是服务化改造,说得简单就是要把原来强耦合的系统拆分成多个弱耦合的服务,通过服务间的调用来满足业务需求看,因此表拆出来后要通过服务的形式暴露出去,而不是直接调用不同模块的表,淘宝在架构不断演变过程,最重要的一环就是服务化改造,把用户、交易、店铺、宝贝这些核心的概念抽取成独立的服务,也非常有利于进行局部的优化和治理,保障核心模块的稳定性
垂直拆分用于分布式场景。

水平拆分

上面谈到垂直切分只是把表按模块划分到不同数据库,但没有解决单表大数据量的问题,而水平切分就是要把一个表按照某种规则把数据划分到不同表或数据库里。例如像计费系统,通过按时间来划分表就比较合适,因为系统都是处理某一时间段的数据。而像SaaS应用,通过按用户维度来划分数据比较合适,因为用户与用户之间的隔离的,一般不存在处理多个用户数据的情况,简单的按user_id范围来水平切分
通俗理解:水平拆分行,行数据拆分到不同表中, 垂直拆分列,表数据拆分到不同表中

水平分割案例

思路:在大型电商系统中,每天的会员人数不断的增加。达到一定瓶颈后如何优化查询。
可能大家会想到索引,万一用户量达到上亿级别,如何进行优化呢?
使用水平分割拆分数据库表。

如何使用水平拆分数据库

使用水平分割拆分表,具体根据业务需求,有的按照注册时间、取摸、账号规则、年份等。

使用取摸方式分表

首先我创建三张表 user0 / user1 /user2 , 然后我再创建 uuid表,该表的作用就是提供自增的id。


create table user0(
id int unsigned primary key ,
name varchar(32) not null default '',
pwd varchar(32) not null default '')
engine=myisam charset utf8;
create table user1(
id int unsigned primary key ,
name varchar(32) not null default '',
pwd varchar(32) not null default '')
engine=myisam charset utf8;
create table user2(
id int unsigned primary key ,
name varchar(32) not null default '',
pwd varchar(32) not null default '')
engine=myisam charset utf8;
create table uuid(
id int unsigned primary key auto_increment)engine=myisam charset utf8;

创建一个demo项目

POM文件


   <parent>
       <groupId>org.springframework.boot</groupId>
       <artifactId>spring-boot-starter-parent</artifactId>
       <version>1.3.3.RELEASE</version>
   </parent>
   <dependencies>
       <dependency>
           <groupId>org.springframework.boot</groupId>
           <artifactId>spring-boot-starter-jdbc</artifactId>
       </dependency>
       <dependency>
           <groupId>org.springframework.boot</groupId>
           <artifactId>spring-boot-starter</artifactId>
       </dependency>
       <dependency>
           <groupId>org.springframework.boot</groupId>
           <artifactId>spring-boot-starter-test</artifactId>
           <scope>test</scope>
       </dependency>
       <dependency>
           <groupId>mysql</groupId>
           <artifactId>mysql-connector-java</artifactId>
       </dependency>
       <dependency>
           <groupId>org.springframework.boot</groupId>
           <artifactId>spring-boot-starter-web</artifactId>
       </dependency>
   </dependencies>

Service代码


@Service
public class UserService {
   @Autowired
   private JdbcTemplate jdbcTemplate;
   public String regit(String name, String pwd) {
       // 1.先获取到 自定增长ID
       String idInsertSQL = "INSERT INTO uuid VALUES (NULL);";
       jdbcTemplate.update(idInsertSQL);
       Long insertId = jdbcTemplate.queryForObject("select last_insert_id()", Long.class);
       // 2.判断存储表名称
       String tableName = "user" + insertId % 3;
       // 3.注册数据
       String insertUserSql = "INSERT INTO " + tableName + " VALUES ('" + insertId + "','" + name + "','" + pwd
               + "');";
       System.out.println("insertUserSql:" + insertUserSql);
       jdbcTemplate.update(insertUserSql);
       return "success";
   }
   public String get(Long id) {
       String tableName = "user" + id % 3;
       String sql = "select name from " + tableName + " where id="+id;
       System.out.println("SQL:" + sql);
       String name = jdbcTemplate.queryForObject(sql, String.class);
       return name;
   }
}

Controller


@RestController
public class UserController {
   @Autowired
   private UserService userService;
   @RequestMapping("/regit")
   public String regit(String name, String pwd) {
       return userService.regit(name, pwd);
   }
   @RequestMapping("/get")
   public String get(Long id) {
       String name = userService.get(id);
       return name;
   }
}

希望本文所述对大家MySQL数据库计有所帮助。

来源:https://blog.csdn.net/kai46385076/article/details/94288953

标签:MySQL,数据库优化,分表分库
0
投稿

猜你喜欢

  • python多线程实现动态图绘制

    2023-10-22 21:53:53
  • python xlsxwriter创建excel图表的方法

    2021-01-12 03:16:10
  • 在Mac下使用python实现简单的目录树展示方法

    2021-03-17 03:46:39
  • PyCharm配置anaconda环境的步骤详解

    2023-07-26 10:11:20
  • python实现机器学习之多元线性回归

    2022-09-04 01:42:49
  • Python语法中的模糊语义

    2022-09-13 01:22:57
  • mysql 大表批量删除大量数据的实现方法

    2024-01-22 10:28:34
  • SQL实现Excel的10个常用功能的示例详解

    2024-01-17 18:11:36
  • python分分钟绘制精美地图海报

    2021-11-10 11:44:25
  • 小三角的做法与使用

    2008-10-08 10:25:00
  • aspjpeg 添加水印教程及生成缩略图教程

    2011-04-04 11:04:00
  • 关于vue-i18n在单文件js中的使用

    2024-05-09 09:38:48
  • python学生管理系统的实现

    2021-08-30 09:08:25
  • Flask web上传获取图像Image读取并使用方式

    2021-06-14 11:37:58
  • Python编程实现的简单神经网络算法示例

    2022-01-06 05:53:17
  • 解决前后端分离 vue+springboot 跨域 session+cookie失效问题

    2024-06-07 15:22:43
  • python 使用get_argument获取url query参数

    2023-02-12 03:52:18
  • 模拟实现 Range 的 insertNode() 方法

    2010-11-30 21:39:00
  • Python爬虫DNS解析缓存方法实例分析

    2021-02-10 11:56:54
  • JS 调试中常见的报错问题解决方法

    2023-07-16 07:42:13
  • asp之家 网络编程 m.aspxhome.com