数据库的 Schema 变更实现

article/2025/10/9 0:42:50

一、减少元数据变更的措施

元数据变更是数据库管理中不可避免的工作项,减少元数据变更次数可降低数据库维护和管理成本,减轻对业务的影响。这里我们可以优先考虑以下 3 点:

  • 精细计划

在数据库设计和开发阶段,精细设计元数据结构可有效避免设计不合理或不充分的情况;

  • 避免过度设计

为降低维护难度和变更次数,元数据结构设计应当秉承简单、实用、符合业务需求的原则,避免过度设计;

  • 合并使用约束

在设计元数据结构时,合并使用约束,包括主键、外键、唯一性约束、非空约束等可以保证数据的完整性和一致性。

二、MySQL Metadata Lock 流程

  1. 由 LEX 和 YACC 根据语句的类型给需要访问的表初始化 MDL 锁请求;

  2. MDL_context 调用 acquire_lock 发起 MDL_request;

  3. 顺利获取到 MDL_ticket,就完成了 MDL 的获取,可以继续查询过程。如果无法获取到,就需要进行锁等待;

  4. 每个线程在进入锁等待前,会进行一次死锁检测,避免当前线程陷入死等。

三、PT-OSC 流程

  1. 创建一个与原表结构相同的空表,表名是 _new 后缀;

  2. 修改步骤 1  创建的空表的表结构;

  3. 在原表上加三个触发器:delete/update/insert,用于复制数据时,将原表中要执行的语句在新表中执行;

  4. 将原表数据以数据块的形式复制到新表;

  5. 将原表重命名为 old 表,并把新表重命名为原表名,然后删除旧表;

  6. 删除触发器。

四、F1 Schema 变更算法

  • 租约:F1 约定了数分钟的 Schema 租约,在租约过期前所有服务器要完成变更操作,如果超时没有完成则认为服务器下线停止工作;

  • 中间状态:把一次 Schema 变更拆解为多个逐步递进的中间状态,使两两中间状态可兼容,整个变更过程转化为演化过程。

五、OSC 流程图

  • 第 1 步:将元数据由 Absent 状态演进到 DELETE_ONLY 状态,Version 加一,同时添加的 Mutation 只对 Delete 操作可见;

  • 第 2 步:通过 waitToUpdateLeases 函数等待集群的其他节点将元数据更新到  Version2,这期间 Version2 的元数据和 Version1 共存,此时在节点 2 插入数据,由于 DELETE_ONLY 状态下 Mutation 对 insert 操作不可见,所以不会增加索引数据;

  • 第 3 步:Mutation 将由 DELETE_ONLY 状态演进到 WRITE_ONLY 状态,同时 Version 加 1,此时 Mutation 对 Insert 和 Delete 操作可见;

  • 第 4 步:再次等待其他节点将表元数据更新到 Version3;

  • 第 5 步:只有需要做数据回填的 DDL 语句才会执行,比如增加索引、删除列、增加带默认值的列等;

  • 第 6 步:Mutation 将变成索引并添加到表元数据中,当前节点完成变更操作;

  • 第 7 步:再次等待其他节点获取到最新的表元数据,此次变更操作结束。


http://chatgpt.dhexx.cn/article/cwhZgbAg.shtml

相关文章

数据库中的 Schema 变更实现

线上沙龙-技术流第 30 期营业啦 05月09日(周二)19:30 KaiwuDB - B站直播间 传统数据库操作 Schema 变更时,第一步便是锁表,需持续到 Schema 变更操作完成。这样的做法虽然实现简单,无需考虑事务并发带来的影响&#…

SQL SERVER 中的Schema详解

以往 SQL Server 内的对象命名是“服务器.数据库.用户名.对象”,但新版的对象命名改为“服务器.数据库.Schema.对象”。这让你规划数据库对象命名时更有弹性。 架构是形成单个命名空间的数据库实体的集合。命名空间是一个集合,其中每个元素的名称都是唯…

Schema是什么

数据库中的Schema 在SQL环境下,schema就是数据库对象的集合, 所谓的数据库对象也就是常说的表,索引,视图,存储过程等。 所谓的数据库对象也就是常说的表,索引,视图,存储过程等。 所…

如何理解MYSQL中schema的概念

学习ES中用到了mapping,百度说类似与MYSQL中的schema,于是对schema的概念很模糊,这里做一下笔记,进行学习。 schema 读音: /ˈskiːmə/ ,汉语意思:(计划或理论的)提要&a…

MySQL的Schema是什么?

1 Schema概念 schema在数据库中表示的是数据库对象集合,它包含了各种对像,比如:表,视图,存储过程,索引等等。 一般一个用户对应一个集合,所以为区分不同集合就需给不同集合起名。用户的schema名…

【database】数据库schema概念解读

schema概念定义 数据库中的schema有多种不同含义和实现: 数据库中的数据模型(data model)数据库中的整个数据结构(data structure)和程序(program)命名空间(namespace)是SQL的一个元素 1. Data Model 数据库schema的含义之一是数据库中表之间的结构,…

SQL Server: 数据库模式SCHEMA

在SQLServer等关系数据库管理系统(RDBMS)中,数据库包含各种对象。 在数据库中,模式(SCHEMA)是指数据库对象的逻辑集合。可以根据应用程序、访问权限和安全性使用模式(SCHEMA)来對对象分組。 SQL Server schemas SQL Server提供以下内置逻辑模式&#…

数据库中的SCHEMA到底是什么?MySQL

平时在看一些数据库相关的书籍或是文档的时候总会出现这样一个词SCHEMA(模式),那这个SCHEMA到底是指什么?下面就来看看 SHCHEMA的定义 官方文档定义 Conceptually, a schema is a set of interrelated database objects, such …

数据库中的Schema是什么?

在数据库中,schema(发音 “skee-muh” 或者“skee-mah”,中文叫模式)是数据库的组织和结构,schemas 和schemata都可以作为复数形式。模式中包含了schema对象,可以是表(table)、列(column)、数据类型(data t…

django数据库的字段新增和添加数据

通过django给数据库添加一个新的字段 控制台输入: python manage.py makemigrations common # 让 Django 知道我们在我们的模型有一些变更控制台输入: python manage.py migrate #创建表结构给数据库添加数据 from django.http import HttpResponsefrom common.models imp…

数据库添加字段

数据库添加字段 在使用数据库添加字段的时候要避免使用关键字 在SQL数据库编辑进行增删改查的时候,发现index这个字段的内容无法进行增删改查,希望大家在使用的时候就不要起那些关键字,嘿嘿,继续加油!

mysql数据库表添加字段_mysql数据库怎么给表增加一个字段?

mysql数据库给表增加一个字段的方法:可以使用“ALTER TABLE”语句来增加一个字段,语法格式“ALTER TABLE 表名 ADD 新字段名 数据类型 [约束条件];”,默认是在表的最后位置添加新字段。 mysql中数据表添加新字段 可以使用“ALTER TABLE”语句来实现,一个完整的字段包括字段…

数据库 - 字段属性

数据库 - 字段属性 主键 – 唯一键和自增长 主键 增加主键 大体分为三种增加主键的方式: 方案一: 高清图: 方案二:有多个字段作为主键可以是复合主键。 方案三: 主键约束 创建约束的目的就是保证数据的完整性和…

线上数据库增加字段导致服务请求超时总结

2019独角兽企业重金招聘Python工程师标准>>> 今天的一个需求上线需要在数据库的某个表中增加一个字段。这个数据库是服务中一个业务量比较少的数据库,与主要业务的数据库是隔离的。执行增加操作后生效比较慢,没有关注,过了一段时间…

mysql添加字段语句_mysql增加字段 mysql数据库更新字段语句

myesl是一个关系型数据库管理系统,也是目前最流行的管理系统之一,目前网页设计方面对一个系统的使用频率是比较高的,因此想要学会网页设计,那么有关myesl的基础知识以及应用就一定要掌握。而今天我们就来看一看myesl增加字段是如何…

Linux 配置 DNS服务(亲测实操),手把手教你看着一篇就够了

Linux 配置 DNS服务(亲测实操),手把手教你看着一篇就够了 DNS 简介DNS 工作过程DNS 配置文件DNS 服务搭建1)基本服务器搭建2)主从DNS服务器搭建3)缓存DNS服务器搭建4)智能DNS(分离解…

Linux 修改DNS配置

项目场景: 最近在对接百度语音合成技术(官方文档 https://ai.baidu.com/ai-doc/SPEECH/Pk38y8m7k)时,将代码放到服务器上就会报错。 问题描述 在调用百度APIhttps://aip.baidubce.com/oauth/2.0/token,获取Access To…

linux的主从DNS配置

一、dns服务器的安装 1.查看安装包的命令 rpm -qa | grep bind 2.删除bind包 rpm -e bind 3.安装dns yum install bind 4.查看安装包的命令 rpm -qa | grep bind 二、dns的服务管理 1.查看dns状态 service named status 2.启动DNS的服务 service named start 3.停止…

linux 配置 DNS 服务器用于解析本地请求

场景: 服务器要使用域名调用其他服务,为此就需要给服务器配置域名解析(DNS)。 一、配置hosts 这种形式前提是知晓对方 ip 和 域名,直接把对应关系写死在 /etc/hosts 文件中,如下: 182.92.187.…

linux设置dns简单的,Linux下的DNS简单配置

Linux下的DNS简单配置 1.安装DNS软件包。挂载redhat光盘镜像,相信大家都会,进入光盘挂载点,找到下面这几个软件包,用rpm或者yum安装,这里就不多做介绍了。 bind-9.3.4-10.P1.el5 (DNS的主安装文件) bind-chroot-9.3.4-10.P1.el5 (这个起到安全作用) caching-nameserver-9.…