大家好,又见面了,我是你们的朋友全栈君。如果您正在找激活码,请点击查看最新教程,关注关注公众号 “全栈程序员社区” 获取激活教程,可能之前旧版本教程已经失效.最新Idea2022.1教程亲测有效,一键激活。
Jetbrains全系列IDE使用 1年只要46元 售后保障 童叟无欺
mysql 数据库表结构设计与规范
DDL(data difinition language)就是数据定义语言。
1.sql语句的界定符
[code]– 默认情况下” ; ” 代表sql语句的结束
delimiter 新的界定符
– 修改 // 为界定符
delimiter //
2.创建数据库
[code]#1.创建数据库
create database 数据库名字 [charset = uft8 ] [collate = 排序规则]
一般都写成这样
create database student charset=utf8;
可以用如下命令查看数据库支持的字符编码
[code]show charset;
用如下命令查看数据库排序规则:
show collation;
可以看到有197种排序规则,注意每种数据库的编码都有相应的排序规则可选,排序规则不是乱写。
3.修改数据库
[code]alter database 数据库名 charset 字符编码 collate 排序规则;
修改数据库的编码和排序规则
alter database mydb charset gbk collate gbk_chinese_ci;
alter database mydb charset utf8 collate utf8_general_ci;
4.显示所有的数据库
[code]show databases; – s 莫忘记
5.显示一个数据库的创建语句
[code]show create database 数据库名;
6.使用某个数据库
[code]use 数据库名
7.删除数据库
[code]#if exists 居于“安全运行的考虑” ,如果数据库不存在,也不会报错,最好写上
drop database [if exists] 数据库名
8.命名和大小写问题
mysql中的各种系统关键字和命令名本身是不区分大小写的,命名规则如下:
-
可以自己命名的名字,称为标识符,包括:数据库名, 表名,字段名,视图名,函数名,过程名,变量名,用户名,等等。
-
可以命名标识符的字符比常规的语言多,但特别建议只用:字母数字和下划线,并不用数字开头。
-
非常规字符或系统关键字虽然可以作为标识符使用,但最好要包在反引号(数字1左边那个反撇 ` )中,并且不推荐。
-
对数据库名,表名,和视图名,在window系统中不区分大小写,而其他系统中区分,建议全使用小写,并采用下划线分割法。
- 对其他自己命名的标识符(字段名,函数名,过程名),不区分大小写,但也建议全使用小写,并采用下划线分割法。
关于单引号和反引号
反引号是为了区分MySQL的保留字和普通字符,其他例如SQL语句用双引号
MySQL中反引号,是以对象为单位的,表,或者库等,不能把a.name都括起来,而是应该`a`.`name`,因为如果`a.name`的话,MySQL会认为你是以a.name为名字的,名字里面包含了.,而这个名字就是不存在的
mysql数据库使用的一些规范
通常来讲,各个互联网公司的数据库分为5个数据库环境:
-
dev : 开发环境, 开发可读写,可修改表结构; 常用的163的数据库表; 开发人员可以修改表结构, 可以随意修改其中的数据; 但是需要保证不影响其他开发同事
-
qa : 测试环境, 开发可读写, 开发人员可以通过工具修改表结构
-
sim: 模拟环境, 开发可读写, 通过web平台;发起上线请求时,会先在这个环境上进行预执行, 这个环境也可供部署上线演练或压力测试使用 可以读写
-
real: 生产数据库从库(准实时同步),只读环境,不允许修改数据,不允许修改表结构; 供线上问题查找,数据查询等使用
-
online: 线上环境;开发人员不允许直接在线上环境进行数据库操作,如果需要操作必须找DBA进行操作并进行相应记录
这些环境的机器,一定要做到权限划分明确,读写帐号分离,并且有辨识度,能区分具体业务。例如用户名w_wap, r_wap 能看出来,读写帐号是wap应用的
数据库开发规范
开发规范本身也包含几部分:基本命名和约束规范,字段设计规范,索引规范,使用规范等
规范存在意义
-
保证线上数据库schema规范
-
减少出问题概率
-
方便自动化管理
-
规范需要长期坚持,对开发和DBA是一个双赢的事情
-
约束规范
-
表字符集选择UTF8 ,如果需要存储emoj表情,需要使用UTF8mb4(MySQL 5.5.3以后支持)
-
存储引擎使用InnoDB
-
变长字符串尽量使用VARCHAR VARBINARY
-
不在数据库中存储图片、文件
-
设计表的时候需要添加注释
-
单表数据量控制在1亿以下,单表物理大小不超过10GB,行平均长度不超过8KB
-
禁止在线上做数据库压⼒测试
-
禁止从测试、开发环境直连数据库
demo:
CREATE TABLE `employees` (
`emp_no` INT NOT NULL AUTO_INCREMENT COMMENT ‘员工的id’,
`birth_date` DATE NOT NULL COMMENT ‘员工的生日’,
`first_name` VARCHAR(14) NOT NULL COMMENT ‘员工的first name’,
`last_name` VARCHAR(16) NOT NULL COMMENT ‘员工的last name’,
`gender` CHAR(1) NOT NULL COMMENT ‘员工的性别’,
`hire_date` DATE NOT NULL COMMENT ‘员工的入职日期’,
PRIMARY KEY (emp_no)
)ENGINE=InnoDB default charset = utf8;
基本命名规范
-
库名、表名、字段名禁止使用保留字
-
库名、表名、字段名、索引名使用小写字母,以下划线分割 ,需要见名知意
-
库名、表名、字段名、索引名不要设计过长,禁止超过32个字符,尽可能用最少的字符表达出表的用途
-
临时库、临时表名必须以tmp为前缀,并以日期为后缀
-
备份库、表必须以bak为前缀,并以日期为后缀
-
库名、表名、字段名、索引名使用名词作为数据库名称,并且只用英文,不用中文拼音
-
库名使用英文字母,全部小写,控制在3-7个字母以内
-
库名如果有多个单词,则使用下划线隔开,不建义驼峰命名
分表规范
-
禁止使用分区表
-
拆分大字段和访问频率低的字段,分离冷热数据
-
使用HASH进行散表,表名后缀使用十进制数,下标从0开始
-
按⽇期时间分表需符合YYYY[MM][DD][HH]格式
-
采用合适的分库分表策略
字段规范
-
所有字段均定义为NOT NULL ,除非你真的想存NULL,但是我想不到需要用Null的情况
-
字段类型在满足需求条件下越小越好,使用UNSIGNED存储非负整数 ,实际使用时候存储负数场景不多
-
使用TIMESTAMP存储时间,使用UNSIGNED INT存储IPv4 地址而不是CHAR(15) ,这种方式只能存储IPv4,存储不了IPv6
-
使用VARCHAR存储变长字符串 ,当然要注意varchar(M)里的M指的是字符数不是字节数;
-
使用DECIMAL代替FLOAT和DOUBLE存储精确浮点数
-
尽可能不用BLOB TEXT
-
使用TINYINT来代替ENUM类型,将字符转化为数字
-
禁止在数据库中存储明文密码
-
使用VARBINARY存储大小写敏感的变⻓字符串
索引规范
-
单个索引字段数不超过5,单表索引数量不超过5,索引设计遵循B+ Tree索引最左前缀匹配原则
-
选择区分度高的列作为索引,区分度高的放在前面
-
对字符串使用前缀索引,前缀索引长度不超过8个字符
-
建议优先考虑前缀索引,必要时可添加伪列并建立索引
-
建立的索引能覆盖80%主要的查询,不求全,解决问题的主要矛盾
-
DML和order by和group by字段要建立合适的索引
-
避免索引的隐式转换
-
避免冗余索引
-
关于主键:表必须有主键 ;不使用更新频繁的列 ;不选择字符串列 ;不使用UUID MD5 HASH ;默认使用非空的唯一键 ,建议选择自增或发号器
-
重要的SQL必须被索引:UPDATE、DELETE语句的WHERE条件列;
-
核心SQL优先考虑覆盖索引
-
不在低基数列上建立索引,例如“性别”
-
不在索引列进行数学运算和函数运算
-
尽量不使外键 ,外键用来保护参照完整性,可在业务端实现;对父亲和子表的操作会相互影响,降低可用性 ;INNODB本身对online DDL的限制
-
不使%前导的查询,如like “%ab”
-
不使用负向查询,如not in/like “无法使用索引,导致全表扫描
-
隐式转换例子,字段定义为varchar,但传入的值是个int,就会导致全表扫描,要求程序端要做好类型检查
SQL类规范
-
使⽤预编译语句,只传参数,比传递SQL语句更高效,降低SQL注用概率
-
充分利用前缀索引
-
尽量不使用存储过程、触发器、函数等,让数据库做最擅长的事
-
避免使用大表的JOIN,MySQL优化器对join优化策略过于简单
-
避免在数据库中进行数学运算和其他大量计算任务
-
SQL合并,主要是指的DML时候多个value合并,减少和数据库交互
-
合理的分页,尤其大分页
-
UPDATE、DELETE语句不使用LIMIT ,容易造成主从不一致
-
使用in代替or,in的值不超过1000个
-
禁止使用order by rand()
-
sql语句避免使用临时表
-
使用union all而不是union
-
程序应有捕获SQL异常的处理机制
-
禁止单条SQL语句同时更新多个表
-
读取数据时,只选取所需要的列,不要每次都SELECT *,避免产生严重的随机读问题,尤其是读到一些TEXT/BLOB列
-
通常情况下,子查询的性能比较差,建议改造成JOIN写法
-
多表联接查询时,关联字段类型尽量一致,并且都要有索引
-
多表连接查询时,把结果集小的表(注意,这里是指过滤后的结果集,不一定是全表数据量小的)作为驱动表
-
多表联接并且有排序时,排序字段必须是驱动表里的,否则排序列无法用到索引
-
多用复合索引,少用多个独立索引,尤其是一些基数(Cardinality)太小(比如说,该列的唯一值总数少于255)的列就不要创建独立索引了
-
类似分页功能的SQL,建议先用主键关联,然后返回结果集,效率会高很多
DBA规范
主要内容
-
SQL审核,DDL审核和操作时间,尤其是OnlineDDL
-
高危操作检查,Drop前做好数据备份
-
日志分析,主要是指的MySQL慢日志和错误日志
-
数据备份方案
-
Online DDL
原生MySQL执行DDL时需要锁表,且锁表期间业务是无法写入数据的,对服务影响很大,MySQL对这方面的支持是比较差的
推荐使用pt-online-schema-change
使用pt-online-schema-change的优点有:
-
无阻塞写入
-
完善的条件检测和延时负载策略控制
使用pt-online-schema-change的限制有:
-
改表时间会比较长(相比直接alter table改表)
-
修改的表需要有唯一键或主键
-
在同一端口上的并发修改不能太多
MySQL集群方案
-
基于主从复制;
-
基于中间件/proxy
-
基于NDB引擎
-
基于Galera协议
优先推荐MHA:可以采用一主多从,或者双主多从的模式,这种模式下,可以采用MHA或MMM来管理整个集群,最新的MHA也已支持MySQL 5.6的GTID模式了
-
MHA的优势很明显:
-
开源,用Perl开发,代码结构清晰,二次开发容易;
-
方案成熟,故障切换时,MHA会做到较严格的判断,尽量减少数据丢失,保证数据一致性;
-
提供一个通用框架,可根据自己的情况做自定义开发,尤其是判断和切换操作步骤;
-
支持binlog server,可提高binlog传送效率,进一步减少数据丢失风险。
不过MHA也有些限制:
-
需要在各个节点间打通ssh信任,这对某些公司安全制度来说是个挑战,因为如果某个节点被黑客攻破的话,其他节点也会跟着遭殃;
-
自带提供的脚本还需要进一步补充完善,当然了,一般的使用还是够用的。
拆分问题
-
解决单机写入压力过大和容量问题
-
有垂直拆分和水平拆分两种方式
-
拆分要适度,切勿过度拆分
-
有中间层控制拆分逻辑最好,否则拆分过细管理成本会很高
数据备份
-
全量备份 VS 增量备份
-
热备 VS 冷备
-
物理备份 VS 逻辑备份
-
延时备份
-
全量binlog备份
建议方式:
-
热备+物理备份
-
核心业务:延时备份+逻辑备份
-
全量binlog备份
主要做的几点:
-
备份策略集中式调度管理
-
xtrabackup热备
-
备份结果统计分析
-
备份数据一致性校验
-
采用分布式文件系统存储备份
发布者:全栈程序员-用户IM,转载请注明出处:https://javaforall.cn/194428.html原文链接:https://javaforall.cn
【正版授权,激活自己账号】: Jetbrains全家桶Ide使用,1年售后保障,每天仅需1毛
【官方授权 正版激活】: 官方授权 正版激活 支持Jetbrains家族下所有IDE 使用个人JB账号...