设为首页 收藏本站
查看: 800|回复: 0

[经验分享] mysql 开发标准规范

[复制链接]

尚未签到

发表于 2018-10-7 11:03:45 | 显示全部楼层 |阅读模式
mysql 开发标准规范
  一、 表设计
  1. 库名、表名、字段名使用小写字母,“_”分割。
  2. 库名、表名、字段名不超过12个字符。
  3. 库名、表名、字段名见名知意,尽量使用名词儿不是动词。
  4. 优先使用InnoDB存储引擎。
  5. 存储精确浮点数使用DECIMAL替代FLOAT和DOUBLE。
  6. 使用UNSIGNED存储非负数值。
  7. 使用INT UNSIGNED存储IPV4。【FAQ】
  8. 整形定义中不添加长度,比如使用INT,而不是INT[4]。【FAQ】
  9. 使用短数据类型,比如取值范围为0-80时,使用TINYINT UNSIGNED。
  10. 不建议使用ENUM、SET类型,使用TINYINT来代替。
  11. 尽可能不使用TEXT、BLOB类型。
  12. VARCHAR(N),N表示的是字符数不是字节数,比如VARCHAR(255),可以最大可存储255个汉字,需要根据实际的宽度来选择N。
  13. VARCHAR(N),N尽可能小,因为MySQL一个表中所有的VARCHAR字段最大长度是65535个字节,进行排序和创建临时表一类的内存操作时,会使用N的长度申请内存。
  14. VARCHAR(N),N>5000时,使用BLOB类型。
  15. 表字符集选择UTF8。
  16. 使用VARBINARY存储变长字符串。
  17. 存储年使用YEAR类型。
  18. 存储日期使用DATE类型。
  19. 存储时间(精确到秒)使用TIMESTAMP类型,因为TIMESTAMP使用4字节,DATETIME使用8个字节。【FAQ】
  20. 字段定义为NOT NULL。
  21. 将过大字段拆分到其他表中。
  22. 不在数据库中使用VARBINARY、BLOB存储图片、文件等。
  二、 索引
  1. 非唯一索引按照“idx_字段名称_字段名称[_字段名]”进行命名。
  2. 唯一索引按照“uniq_字段名称_字段名称[_字段名]”进行命名。
  3. 索引名称使用小写。
  4. 索引中的字段数不超过5个。
  5. 唯一键由3个以下字段组成,并且字段都是整形时,使用唯一键作为主键。
  6. 没有唯一键或者唯一键不符合5中的条件时,使用自增(或者通过发号器获取)id作为主键。
  7. 唯一键不和主键重复。
  8. 索引字段的顺序需要考虑字段值去重之后的个数,个数多的放在前面。
  9. ORDER BY,GROUP BY,DISTINCT的字段需要添加在索引的后面。
  10. 单张表的索引数量控制在5个以内。
  11. 使用EXPLAIN判断SQL语句是否合理使用索引,尽量避免extra列出现:Using File Sort,Using Temporary。【FAQ】
  12. UPDATE、DELETE语句需要根据WHERE条件添加索引。
  13. 不建议使用%前缀模糊查询,例如LIKE “%weibo”。
  14. 对长度大于50的VARCHAR字段建立索引时,使用其他方法。【FAQ】
  15. 合理创建联合索引(避免冗余),(a,b,c) 相当于 (a) 、(a,b) 、(a,b,c)。
  16. 合理利用覆盖索引。【FAQ】
  17. 在合理情况下使用FORCE INDEX。
  18. SQL变更需要确认索引是否需要变更并通知DBA。
  三、 SQL语句
  1. 使用prepared statement,可以提供性能并且避免SQL注入。
  2. SQL语句中IN包含的值不超过500。
  3. UPDATE、DELETE语句不使用LIMIT。
  4. WHERE条件中使用合适的类型,避免MySQL进行隐式类型转化。【FAQ】
  5. SELECT语句只获取需要的字段。
  6. SELECT、INSERT语句显式的指明字段名称,不使用SELECT *,不适用INSERT INTO table()。
  7. 使用SELECT column_name1, column_name2 FROM table WHERE [condition]而不是SELECT column_name1 FROM table WHERE [condition]和SELECT column_name2 FROM table WHERE
  [condition]。
  8. WHERE条件中的非等值条件(IN、BETWEEN、=)会导致后面的条件使用不了索引。
  9. 避免在SQL语句进行数学运算或者函数运算,容易将业务逻辑和DB耦合在一起。
  10. INSERT语句使用batch提交(INSERT INTO table VALUES(),(),()),values的个数不超过500。
  11. 避免使用存储过程、触发器、函数等,容易将业务逻辑和DB耦合在一起,并且MySQL的存储过程、触发器、函数中存在一定的bug。
  12. 避免使用JOIN。
  13. 使用合理的SQL语句减少与数据库的交互次数。【FAQ】
  14. 不使用ORDER BY RAND(),使用其他方法替换。【FAQ】
  15. 使用合理的分页方式以提高分页的效率。【FAQ】
  16. 统计表中记录数时使用COUNT(*),而不是COUNT(primary_key)和COUNT(1)。
  17. 禁止在从库上执行后台管理和统计类型功能的QUERY。
  四、 散表
  1. 每张表数据量控制在5000w以下。
  2. 可以结合使用hash、range、lookup table进行散表。
  3. Hash散表,表名后缀使用16进制,比如user_ff。
  4. 使用时间散表,表名后缀使用日期,比如按日散表user_20110209、按月散表user_201102。
  五、 其他
  1. 批量导入、导出数据需要DBA进行审查,并在执行过程中观察服务。
  2. 批量更新数据,如update,delete 操作,需要DBA进行审查,并在执行过程中观察服务。
  3. 产品出现非数据库平台运维导致的问题和故障时,如前端被抓站,请及时通知DBA,便于维护服务稳定。
  4. 业务部门程序出现bug等影响数据库服务的问题,请及时通知DBA,便于维护服务稳定。
  5. 业务部门推广活动,请提前通知DBA进行服务和访问评估。
  6. 如果出现业务部门人为误操作导致数据丢失,需要恢复数据,请在第一时间通知DBA,并提供准确时间,误操作语句等重要线索。
  FAQ
  1. 如何使用INT UNSIGNED存储ip?
  使用INT UNSIGNED而不是char(15)来存储ipv4地址,通过MySQL函数inet_ntoa和inet_aton来进行转化。Ipv6地址目前没有转化函数,需要使用DECIMAL或者两个bigINT来存储。例如: SELECT INET_ATON('209.207.224.40'); 3520061480 SELECT INET_NTOA(3520061480); 209.207.224.40
  2. INT[M],M值代表什么含义?
  注意数值类型括号后面的数字只是表示宽度而跟存储范围没有关系,比如INT(3)默认显示3位,空格补齐,超出时正常显示,python、java客户端等不具备这个功能。
  3. 为什么建议使用TIMESTAMP来存储时间而不是DATETIME?
  DATETIME和TIMESTAMP都是精确到秒,优先选择TIMESTAMP,因为TIMESTAMP只有4个字节,而DATETIME8
  个字节。同时TIMESTAMP具有自动赋值以及自动更新的特性。
  4. 如何使用TIMESTAMP的自动赋值属性?
  a) 将当前时间作为ts的默认值:ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP。
  b) 当行更新时,更新ts的值:ts TIMESTAMP DEFAULT 0 ON UPDATE CURRENT_TIMESTAMP。
  c) 可以将1和2结合起来:ts TIMESTAMP DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP。
  如何对长度大于50的VARCHAR字段建立索引?
  下面的表增加一列url_crc32,然后对url_crc32建立索引,减少索引字段的长度,提高效率。
  CREATE TABLE url(

  url VARCHAR(255) NOT NULL DEFAULT 0, url_crc32 INT UNSIGNED NOT NULL DEFAULT 0,  index>  6. 为什么需要避免MySQL进行隐式类型转化?
  因为MySQL进行隐士类型转化之后,可能会将索引字段类型转化成=号右边值的类型,导致使用不到索引,原因和避免在索引字段中使用函数是类似的。
  7. 为什么避免使用复杂的SQL?
  拒绝使用复杂的SQL,将大的SQL拆分成多条简单SQL分步执行。原因:简单的SQL容易使用到MySQL的query cache;减少锁表时间特别是MyISAM;可以使用多核cpu。
  8. 为什么不建议使用SELECT *?
  增加很多不必要的消耗(cpu、io、内存、网络带宽);增加了使用覆盖索引的可能性;当表结构发生改变时,前段也需要更新。
  9. InnoDB存储引擎为什么避免使用COUNT(*)?
  InnoDB表避免使用COUNT(*)操作,计数统计实时要求较强可以使用memcache或者redis,非实时统计可以使用单独统计表,定时更新。
  10. MySQL中如何进行分页?
  假如有类似下面分页语句: SELECT * FROM table ORDER BY TIME DESC LIMIT 10000,10; 这种分页方式会导致大量的io,因为MySQL使用的是提前读取策略。 推荐分页方式: SELECT * FROM table WHERE TIME
  11. 为什么不能使用ORDER BY rand()?
  因为ORDER BY rand()会将数据从磁盘中读取,进行排序,会消耗大量的IO和CPU,可以在程序中获取一个rand值,然后通过在从数据库中获取对应的值。
  12. 如何减少与数据库的交互次数?
  使用下面的语句来减少和db的交互次数: INSERT ... ON DUPLICATE KEY UPDATE REPLACE INSERT IGNORE INSERT INTO values(),()
  13. 如何结合使用多个纬度进行散表散库?
  例如微博message,先按照crc32(message_id)将message散到16个库中,然后针对每个库中的表,
  一天生成一张新表。
  14. VARCHAR中会产生额外存储吗?
  VARCHAR(M),如果M=256则使用两个字节来存储长度。
  15. 为什么MySQL的性能依赖于索引?
  MySQL的查询速度依赖良好的索引设计,因此索引对于高性能至关重要。合理的索引会加快查询速度(包括UPDATE和DELETE的速度,MySQL会将包含该行的page加载到内存中,然后进行UPDATE或者DELETE操作),不合理的索引会降低速度。 MySQL索引查找类似于新华字典的拼音和部首查找,当拼音和部首索引不存在时,只能通过一页一页的翻页来查找。当MySQL查询不能使用索引时,MySQL会进行全表扫描,会消耗大量的IO。
  16. 为什么一张表中不能存在过多的索引?
  InnoDB的secondary index使用b+tree来存储,因此在UPDATE、DELETE、INSERT的时候需要对b+tree进行调整,过多的索引会减慢更新的速度。
  17. 什么是覆盖索引?
  InnoDB存储引擎中,secondary index(非主键索引)中没有直接存储行地址,存储主键值。如果用户需要查询secondary index中所不包含的数据列时,需要先通过secondary index查找到主键值,然后再通过主键查询到其他数据列,因此需要查询两次。 覆盖索引的概念就是查询可以通过在一个索引中完成,覆盖索引效率会比较高,主键查询是天然的覆盖索引。 合理的创建索引以及合理的使用查询语句,当使用到覆盖索引时可以获得性能提升。 比如SELECT email,uid FROM user_email WHERE uid=xx,如果uid不是主键,适当时候可以将索引添加为index(uid,email),以获得性能提升。
  18. EXPLAIN语句
  EXPLAIN语句(在MySQL客户端中执行)可以获得MySQL如何执行SELECT语句的信息。通过对SELECT语句执行EXPLAIN,可以知晓MySQL执行该SELECT语句时是否使用了索引、全表扫描、临时表、排序等信息。尽量避免MySQL进行全表扫描、使用临时表、排序等


运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-614260-1-1.html 上篇帖子: DRBD+mysql高可用 下篇帖子: MySQL级联复制配置
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表