草庐IT

【推荐】MySQL数据库设计SQL规范

可乐∞芬达 2023-03-28 原文

1 命名规范

1、【强制】库名、表名、字段名必须使用小写字母并采用下划线分割,禁止拼音英文混用;(禁用-,-相当于运算符)

2、【建议】库名、表名、字段名在满足业务需求的条件下使用最小长度;

如information --> info;address --> addr等

3、【强制】库名、表名、字段名禁止使用MySQL保留关键字,如from,table等

详见https://dev.mysql.com/doc/refman/5.7/en/keywords.html

4、【强制】临时库、临时表名必须以tmp为前缀并以日期为后缀,例如tmp_user_20201231;

5、【强制】备份库、备份表名必须以bak为前缀并以日期为后缀,例如bak_user_20201231;

6、【强制】非唯一索引命名idx_字段1_字段名2,唯一索引uniq_字段名1_字段名2;

2 基本规范

1、【强制】使用INNODB存储引擎

支持事务、行级锁、并发性能更好、CPU及内存缓存页优化使得资源利用率更高;

2、【强制】使用UTF8或UTF8MB4字符集;

万国码,无需转码,无乱码风险,节省空间;

3、【强制】表、字段必须有comments(中文注释);

中文注释信息必须保证完整、明确和准确;表和字段含义发生变更时,comments(中文注释)必须做同步修改;

4、【强制】不在数据库中存储图片、文件等大数据;

系统对数据库的读/写速度 < 系统对文件的直接处理速度
数据库对大数据字段的处理,效率不高

5、【强制】禁止在线上做数据库压力测试;

6、【强制】禁止使用存储过程、视图、触发器、Event;

跨库查询,视图等可以考虑用宽表查询

3 库表设计规范

1、【强制】表必须有主键,例如自增主键,使用int或bigint,具体看预估业务量;

主键递增,数据行写入可以提高插入性能,可以避免page分裂,减少表碎片提升空间和内存的使用;
主键要选择较短的数据类型, Innodb引擎普通索引都会保存主键的值,较短的数据类型可以有效的减少索引的磁盘空间,提高索引的缓存效率;
无主键的表删除,在row模式的主从架构,会导致备库夯住;

2、【建议】单表字段数目建议不要过多,建议不要超过64

单表字段数太多会使得MySQL处理InnoDB返回数据之间的映射成本太高。

3、【强制】禁止使用外键,如果有外键完整性约束,需要应用程序控制

外键用来保护参照完整性,可在业务端实现,对父表和子表的操作会相互影响,降低可用性,甚至会造成死锁。

4.【建议】所有表要有如下系统字段,且按照如下顺序

Name

Code

DataType

Length

Not Null

Default

主键

id

Bigint或int

 

(表中的第一个字段)

……

 

 

 

其他业务字段

删除标识

is_delete

Tinyint

1

0(未删除)

创建时间

create_time

DateTime

 

记录创建时间

更新时间

update_time

DateTime

 

记录更新时间

创建人

create_user

Varchar(50)

50

 

更新人

update_user

Varchar(50)

50

 

时间戳

ts

timestamp

 

当前时间:数据库自动维护

 

4 索引设计规范

索引是一把双刃剑,它可以提高查询效率但也会降低插入和更新的速度并占用磁盘空间

1、【建议】单张表中索引数量不超过5个(不包括主键)

索引不是越多越好,按实际需要进行创建,每个额外的索引都要占用额外的磁盘空间,并降低写操作的性能;

2、【建议】单个索引中的字段数不超过5个

对字符串使用前缀索引,前缀索引长度不超过10个字符;如果有一个CHAR(200)列,如果在前10个字符内,多数值是惟一的,那么就不要对整个列进行索引。对前10个字符进行索引能够节省大量索引空间,也可能会使查询更快;

3、【强制】创建复合索引时, 必须把区分度高的字段放在前面

4、【建议】不建议在更新十分频繁、区分度不高的属性上建立索引,特殊场景除外,例如只有0和1,1只占非常小的部分,只会去查询1的情况。

5、【强制】避免冗余或重复索引

合理创建联合索引(避免冗余),index(a、b、c)相当于index(a)、index(a、b)、index(a、b、c);

5 字段设计规范

1、【建议】不建议使用TEXT、BLOB类型

会浪费更多的磁盘和内存空间,非必要的大量的大字段查询会淘汰掉热数据,导致内存命中率急剧降低,影响数据库性能;如果实在有某个字段过长需要使用 TEXT、BLOB 类型,则建议独立出来一张表,用主键来对应,避免影响原表的查询效率。

2、【强制】用DECIMAL代替FLOAT和DOUBLE存储精确浮点数

浮点数相对于定点数的优点是在长度一定的情况下,浮点数能够表示更大的数据范围;浮点数的缺点是会引起精度问题

3、【强制】字段必须定义合适的数据类型

只存储数字的字段定义成数字类型,只存储字符的字段定义成字符类型, 定长的字符定义成char ,尽可能用存储空间小的类型,只存储日期的字段定义成日期类型,以减少使用过程中的数据类型转换

4、【强制】禁止使用ENUM,可使用TINYINT代替

增加新的ENUM值要做DDL操作

5、【建议】字段长度尽量按实际需要进行分配,不要随意分配一个很大的容量

VARCHAR(N),N表示的是字符数不是字节数,比如VARCHAR(255),可以最大可存储255个汉字,需要根据实际的宽度来选择N;
VARCHAR(N),N尽可能小,因为MySQL一个表中所有的VARCHAR字段最大长度是65535个字节,进行排序和创建临时表一类的内存操作时,会使用N的长度申请内存;

6、【建议】如果可能的话所有字段均定义为not null且提供默认值

null的列使索引/索引统计/值比较都更加复杂,对MySQL来说更难优化;
null 这种类型MySQL内部需要进行特殊处理,增加数据库处理记录的复杂性;同等条件下,表中有较多空字段的时候,数据库的处理性能会降低很多;
null值需要更多的存储空间,无论是表还是索引中每行中的null的列都需要额外的空间来标识;
对null 的处理时候,只能采用is null或is not null,而不能采用=、in、<、<>、!=、not in这些操作符号。如:where name!=’shenjian’,如果存在name为null值的记录,查询结果就不会包含name为null值的记录;

7、【建议】建议使用TIMESTAMP存储时间. 因为TIMESTAMP使用4字节,DATETIME使用8个字节,同时TIMESTAMP具有自动赋值以及自动更新的特性,具体看业务需求。

6 SQL设计规范

1、【建议】使用预编译语句prepared statement(针对jdbc及mybatis)

只传参数,比传递SQL语句更高效,一次解析,多次使用,降低SQL注入概率;

2、【强制】禁止在WHERE条件的属性上使用函数或者表达式

无法使用索引导致全表扫描;

3、【强制】避免隐式转换(查询条件左右两侧类型不匹配)

会导致索引失效而全表扫描,如userid为int类型,select userid from table where userid='1234';相当于隐式地使用了函数将int类型转换为字符串。

4、【强制】禁止使用INSERT INTO t_xxx VALUES (xxx)必须显示指定插入的列属性,否则容易在增加或者删除字段后出现程序bug。

5、【强制】禁止使用SELECT *,只获取必要的字段,需要显示说明列属性

读取不需要的列会增加CPU、IO、NET消耗,不能有效的利用覆盖索引,减少表结构变更带来的影响;

6、【建议】避免使用大表的join, 大表使用子查询

MySQL最擅长的是单表的主键/二级索引查询,大表join会产生临时表,消耗较多内存与CPU,极大影响数据库性能;

7、【建议】拒绝大SQL,拆分成小SQL

充分利用多核CPU;

8、【建议】考虑使用limit N,少用limit M, N,特别是大表或M比较大的时候

9、【建议】减少或避免排序,尽量利用索引本身的有序 ,例如where条件中无id时order by id优化器会选择主键索引,但是 where 条件里又没有主键条件,导致全表扫描。

10、【建议】使用union all而不是union

尽量使用UNION  ALL,减少使用UNION,因为UNION  ALL不去重,而少了排序操作,速度相对比UNION要快,如果没有去重的需求,优先使用UNION ALL;

11、【强制】避免使用全表扫描,配置表和小表(数据总量小于1万条)例外。如果数据量比较小,或认为不会超过10000条数据,可以加上LIMIT限制;

12【强制】同表的增删字段、索引合并一条DDL语句执行,提高执行效率,减少与数据库的交互。

7 行为规范

1、【强制】大数据量导入、导出数据必须提前通知DBA协助观察(以100w行作为参考基准,具体和表字段数量相关);

2、【强制】大数据量更新数据,如update、delete操作,需要DBA进行审查,并在执行过程中观察服务负载等各种状况;

3、【强制】禁止有super权限的应用程序账号存在;

4、【强制】促销活动或上线新功能必须提前一周通知DBA进行流量评估;

5、【强制】数据库数据丢失,第一时间联系DBA进行恢复;

6、【强制】不在MySQL数据库中存放业务逻辑;

7、【强制】对特别重要的库表,提前与DBA沟通确定维护和备份优先级;

8、【强制】不在业务高峰期批量更新、查询数据库;

有关【推荐】MySQL数据库设计SQL规范的更多相关文章

  1. ruby-on-rails - Rails - 子类化模型的设计模式是什么? - 2

    我有一个模型:classItem项目有一个属性“商店”基于存储的值,我希望Item对象对特定方法具有不同的行为。Rails中是否有针对此的通用设计模式?如果方法中没有大的if-else语句,这是如何干净利落地完成的? 最佳答案 通常通过Single-TableInheritance. 关于ruby-on-rails-Rails-子类化模型的设计模式是什么?,我们在StackOverflow上找到一个类似的问题: https://stackoverflow.co

  2. ruby - 解析 RDFa、微数据等的最佳方式是什么,使用统一的模式/词汇(例如 schema.org)存储和显示信息 - 2

    我主要使用Ruby来执行此操作,但到目前为止我的攻击计划如下:使用gemsrdf、rdf-rdfa和rdf-microdata或mida来解析给定任何URI的数据。我认为最好映射到像schema.org这样的统一模式,例如使用这个yaml文件,它试图描述数据词汇表和opengraph到schema.org之间的转换:#SchemaXtoschema.orgconversion#data-vocabularyDV:name:namestreet-address:streetAddressregion:addressRegionlocality:addressLocalityphoto:i

  3. ruby-on-rails - 使用 rails 4 设计而不更新用户 - 2

    我将应用程序升级到Rails4,一切正常。我可以登录并转到我的编辑页面。也更新了观点。使用标准View时,用户会更新。但是当我添加例如字段:name时,它​​不会在表单中更新。使用devise3.1.1和gem'protected_attributes'我需要在设备或数据库上运行某种更新命令吗?我也搜索过这个地方,找到了许多不同的解决方案,但没有一个会更新我的用户字段。我没有添加任何自定义字段。 最佳答案 如果您想允许额外的参数,您可以在ApplicationController中使用beforefilter,因为Rails4将参数

  4. ruby - Ruby 有 `Pair` 数据类型吗? - 2

    有时我需要处理键/值数据。我不喜欢使用数组,因为它们在大小上没有限制(很容易不小心添加超过2个项目,而且您最终需要稍后验证大小)。此外,0和1的索引变成了魔数(MagicNumber),并且在传达含义方面做得很差(“当我说0时,我的意思是head...”)。散列也不合适,因为可能会不小心添加额外的条目。我写了下面的类来解决这个问题:classPairattr_accessor:head,:taildefinitialize(h,t)@head,@tail=h,tendend它工作得很好并且解决了问题,但我很想知道:Ruby标准库是否已经带有这样一个类? 最佳

  5. ruby-on-rails - Rails 中的推荐引擎 - 2

    我想为我的Rails网络应用程序提供推荐功能。特别是,我想向新注册的用户推荐他可能想要关注的其他用户。Rails中是否有用于此目的的引擎/gem?如果没有,我应该从哪里开始构建它?谢谢。 最佳答案 有Coletivogemhttps://github.com/diogenes/coletivo我试了一下。在MySQL上运行。Neo4jhttp://neo4j.org真的很容易实现一个“跟随谁”。事实上,大多数展示其能力的样本都涉及“跟随谁”。快速提示-只有在JRuby上运行时,Neo4j.rb才会很酷。如果不是-使用Neograph

  6. ruby - 我如何添加二进制数据来遏制 POST - 2

    我正在尝试使用Curbgem执行以下POST以解析云curl-XPOST\-H"X-Parse-Application-Id:PARSE_APP_ID"\-H"X-Parse-REST-API-Key:PARSE_API_KEY"\-H"Content-Type:image/jpeg"\--data-binary'@myPicture.jpg'\https://api.parse.com/1/files/pic.jpg用这个:curl=Curl::Easy.new("https://api.parse.com/1/files/lion.jpg")curl.multipart_form_

  7. 世界前沿3D开发引擎HOOPS全面讲解——集3D数据读取、3D图形渲染、3D数据发布于一体的全新3D应用开发工具 - 2

    无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD

  8. FOHEART H1数据手套驱动Optitrack光学动捕双手运动(Unity3D) - 2

    本教程将在Unity3D中混合Optitrack与数据手套的数据流,在人体运动的基础上,添加双手手指部分的运动。双手手背的角度仍由Optitrack提供,数据手套提供双手手指的角度。 01  客户端软件分别安装MotiveBody与MotionVenus并校准人体与数据手套。MotiveBodyMotionVenus数据手套使用、校准流程参照:https://gitee.com/foheart_1/foheart-h1-data-summary.git02  数据转发打开MotiveBody软件的Streaming,开始向Unity3D广播数据;MotionVenus中设置->选项选择Unit

  9. 使用canal同步MySQL数据到ES - 2

    文章目录一、概述简介原理模块二、配置Mysql使用版本环境要求1.操作系统2.mysql要求三、配置canal-server离线下载在线下载上传解压修改配置单机配置集群配置分库分表配置1.修改全局配置2.实例配置垂直分库水平分库3.修改group-instance.xml4.启动监听四、配置canal-adapter1修改启动配置2配置映射文件3启动ES数据同步查询所有订阅同步数据同步开关启动4.验证五、配置canal-admin一、概述简介canal是Alibaba旗下的一款开源项目,Java开发。基于数据库增量日志解析,提供增量数据订阅&消费。Git地址:https://github.co

  10. ruby-on-rails - 创建 ruby​​ 数据库时惰性符号绑定(bind)失败 - 2

    我正在尝试在Rails上安装ruby​​,到目前为止一切都已安装,但是当我尝试使用rakedb:create创建数据库时,我收到一个奇怪的错误:dyld:lazysymbolbindingfailed:Symbolnotfound:_mysql_get_client_infoReferencedfrom:/Library/Ruby/Gems/1.8/gems/mysql2-0.3.11/lib/mysql2/mysql2.bundleExpectedin:flatnamespacedyld:Symbolnotfound:_mysql_get_client_infoReferencedf

随机推荐