码迷,mamicode.com
首页 > 其他好文 > 详细

schema设计

时间:2019-05-02 12:05:12      阅读:142      评论:0      收藏:0      [点我收藏+]

标签:普通表   sum   cli   信息   实现   时间戳   程序   开发   data   

Schema:表的模式;
 
设计数据的表,索引,以及表和表的关系
  1. 在数据建模的基础上将关系模型转为数据库表
  2. 满足业务模型需要基础上根据数据库和应用特点优化表结构
 
关系模型图:
技术图片
 技术图片

 

Schema关系到应用程序功能与性能
  • 满足业务功能需求
  • 同性能密切相关
  • 数据库扩展性
  • 满足周边需求(统计,迁移等)
 
关系型数据库修改Schema经常是高危操作
     Schema设计要体现一定的前瞻性
 
完全由开发者主导的Schema设计
  • 着眼于实现当前功能
  • 完全基于功能的设计可能存在一些隐患
    •    不合理的表结构或索引设计造成性能问题
    •    没有合理评估到数据量的增长造成空间紧张而且难以维护
    •    需求频繁修改造成表结构经常变更
    •    业务重大调整导致数据经常需要重构订正
 
基于性能的表设计
  • 根据查询需要设计好索引
  • 根据核心查询需求, 适当调整表结构
  • 基于一些特殊业务需求,调整实现方式
 
索引
  • 正确使用索引
  • 更新尽可能使用主键或唯一索引
  • 主键尽可能使用自增ID字段
  • 核心查询使用覆盖索引
    •           用户登录需要根据用户名返回密码用于验证
    •           create index idx_uname_passwd on tb_user (username,passwd);
    •           建立联合索引避免回表取数据
 
 
设计举例

 
1 反范式,冗余必要字段
技术图片
技术图片
2 拆分大字段
技术图片
技术图片

 

3 避免过多字段或过长行技术图片
 技术图片
 
4 分页查询:
技术图片
 技术图片
 
 5  热点读数据特殊处理
技术图片
技术图片
 
 
 6 热点写数据特殊处理
技术图片
 技术图片

 

7 准实时统计
技术图片
技术图片

 

实时统计改进1--触发器实时统计
技术图片
技术图片

 

实时统计改进2-缓存实时统计
技术图片

 

技术图片
实时统计改进3-最大自增ID获取总数
技术图片
技术图片

 

 
8  可扩展性设计
技术图片
技术图片

 

9 分区表与数据淘汰
range分区
技术图片

 

技术图片
list分区
技术图片
技术图片

 

hash分区
技术图片
技术图片
 
10 满足周边需求
技术图片
技术图片
统计和后台需求
技术图片
技术图片
11 自动更新时间戳
技术图片
 技术图片
Schema设计与前瞻性
  • 基于历史经验教训,预防和解决同类问题
  • 把折腾DBA够呛的索引Schema改造的原因记录并分析总结
例子:
业务为了用户信息加密做了大改造
  •  数据库结果大量改动,增加了加密字段,验证策略表,所有表重新订正数据等等
  •  是否所有用到用户信息管理的应用都要去上线就用密文?
技术图片

 

 总结

 
  •  schema设计关系性能
  •  反范式,冗余必要字段
  •  拆分大字段
  •  避免过多字段或过长字段
  •  分页查询
  •  热点读数据特殊处理:置顶表与普通表分开
  •  热点写数据特殊处理:
    • 微博普通用户发消息,则写入关注他的人的消息列表中;微博大V发消息,则关注他的人都去读他的消息列表;
  •  准实时统计:
    • 定时统计表,更据上次更新时间统计全表中增量sum值,每分钟更新统计表;
  •  实时统计:
    • 触发器实时统计,在用户插入时,更新统计表;
    • 缓存实时统计,应用将用户新增写在内存缓存中,业务平时从缓存中读,缓存失效,从数据库做一次查询,接着写在缓存;
  • 分区表与数据淘汰
  • 满足周边需求:
    • 如后台统计任务而增加特殊索引,
    • 为数据迁移或统计增加时间戳
  • 自动更新时间戳
  • schema设计与前瞻性

schema设计

标签:普通表   sum   cli   信息   实现   时间戳   程序   开发   data   

原文地址:https://www.cnblogs.com/itplay/p/10801672.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!