如何针对业务做DB优化
Download as PPTX, PDF2 likes25,398 views
该文档讨论了针对业务的数据库优化，强调了优化的时机、DBA的角色以及如何识别优化点。优化可以在项目的多个阶段进行，关键在于理解团队目标和业务需求。还提到线上系统压测的重要性，以确保系统的可靠性和性能。
如何针对业务做DB优化
- 2. About ME @吴炳锡 MySQL DBA 技能分享QQ群：373900864 中国CMUG核心组织者, MySQL布道者 10年+ 专职MySQL DBA，丰富的Support支撑能力 熟悉MySQL高可用方案 丰富的大型系统后端存储规划设计 熟悉多机房架构设计及运维 丰富的自动化平台开发及实践 http://imysql.com http://mysqlsupport.cn 2
- 3. 背景 http://imysql.com http://mysqlsupport.cn 3 小张 ，你说做了DB优化， 但线上的系统还慢，好象 效果不大呀！！！ +++…
- 4. 大纲 • 什么时间进行优化 • DBA介入时间及角色 • 如何找到业务系统的优化点 • 线上系统压测开展 • 讨论交流 http://imysql.com http://mysqlsupport.cn 4
- 6. 什么时间进行优化 • 项目开始 • 学习别人怎么做，了解开始在做什么 • 举例： • 有一个需求 用户浏览时显示已读和未读标识 http://imysql.com http://mysqlsupport.cn 6 建一个表标识出来？ 哈，猪也想到了
- 7. 什么时间进行优化 • BloomFilter解决的问题 • Hash Key空间问题 • 通过时间换空间，引入了多次计算 • 引入的问题 • 有可能会出现错误 http://imysql.com http://mysqlsupport.cn 7
- 8. 什么时间进行优化 • 项目进行中 • 从我们DBA的角度看看还能帮助别人做什么 • 举例 • 线下布署怎么到线上规范化布署 • 通过开全量日志观查SQL中可优化点 • 早做准备，纠正开发环境中不爽的问题 • 加强测试 http://imysql.com http://mysqlsupport.cn 8
- 9. 什么时间进行优化 • 项目上线 • DBA就是开发顾来的保姆，要把别人孩子养活了 • 举例 • 上线后是不是在预估的范围内 • 1个月左右的反馈开发过程 • 交维后：线上从库压力大了，你怎么办？ • 还需要开发协助吗？ http://imysql.com http://mysqlsupport.cn 9
- 10. 什么时间进行优化 • 总结 • 不要报怨，弄清楚，团队当前的首要任务 • 做别人不善长的事，做好的互补人员 • 优化什么时间都可以做，关建要明白当前最重要的目标 http://imysql.com http://mysqlsupport.cn 10
- 11. 大纲 • 什么时间进行优化 • DBA介入时间及角色 • 如何找到业务系统的优化点 • 线上系统压测开展 • 讨论交流 http://imysql.com http://mysqlsupport.cn 11
- 12. DBA介入时间及角色 http://imysql.com http://mysqlsupport.cn 12 时间 角色 主要职责 初期 架构师或是学习 规划项目开发中主要技术点 及实现方式 开发期 Bug或是性能提示人员 帮着开发指出低级的Bug及 协助开发人员做一些性能优 化 线上阶段 应用保姆或监护权 应用运行是不是那样，有什 么优化点，如何做…
- 13. DBA介入时间及角色 • DBA说真的是越早介入，越好。 • 但介入早的DBA一定要有业务分析能力，能分析出来业务的关建 性能瓶颈点 • 如大家觉的微博业务性能瓶颈点在哪？ 平时没事多想想 http://imysql.com http://mysqlsupport.cn 13
- 14. 大纲 • 什么时间进行优化 • DBA介入时间及角色 • 如何找到业务系统的优化点 • 线上系统压测开展 • 讨论交流 http://imysql.com http://mysqlsupport.cn 14
- 15. 如何找到业务系统的优化点 • 找到核心目标 • 支付系统： • 微信线下支付 VS 红包 • DB挂了，怎么办？ • 飞信 • 圣诞，元旦，春节 大压力 • 网站 • DB挂了，首页还可以显示吗？ • 抢购类业务 • DB怎么设计才能抗的住 http://imysql.com http://mysqlsupport.cn 15
- 16. 如何找到业务系统的优化点 • 支付系统 • 前提： • 线下支付不能停（ • 数据必须一致 • 分级对待（基于失败设计） • 红包在不可用的状态下（发不出去），但不能让线下支付不能用 • 多写（业务层实现），多写一致性问题，怎么对帐较快 • 基于状态级的支付流程设计 • 假设DB不可写，在可读情况下进行支付 • 以上是怎么做到呢？ • 日常逻辑+思考 http://imysql.com http://mysqlsupport.cn 16
- 17. 如何找到业务系统的优化点 • 飞信项目 • 用户可以达到，进行聊天 • 问题： 过节容易挂 • 通过高峰期抓取SQL，通过SQL采样分析DB内业务主要形态 • 针对业务优化，缓存，写合并 • 拆分，从骨干业务拆分出去 • SQL抓取 • Percona版本 • Set global long_query_time=0; select sleep(5); set global long_query_time=1; http://imysql.com http://mysqlsupport.cn 17
- 18. 如何找到业务系统的优化点 • 网站类业务 • 以前在一个做彩票类的公司，大概月流水5千万左右的交易 • DB一挂，主站也不会显示了 • 然后公司的客服电话就…. • 怎么优化呢？ http://imysql.com http://mysqlsupport.cn 18
- 19. 如何找到业务系统的优化点 • 抢购类业务 • 我觉的这种业务一直是对DB的一种DDOS • 解决方案 • 在业务前面引入接入层 • 按需要放量 • 排队进到后面 • 保持DB高效吞吐 http://imysql.com http://mysqlsupport.cn 19
- 20. 如何找到业务系统的优化点 • 总结 • 找到业务核心 • 弄明白关键业务保证 • 重点保障 • 追求可用，合理的引入状态机 http://imysql.com http://mysqlsupport.cn 20
- 21. 大纲 • 什么时间进行优化 • DBA介入时间及角色 • 如何找到业务系统的优化点 • 线上系统压测开展 • 讨论交流 http://imysql.com http://mysqlsupport.cn 21
- 22. 开展线上系统压测 • 只有经过压测的系统才是有底的系统 • 号称的系统都是不靠谱的系统 • 压测机可以考虑购买云主机 • 在业务低峰期压测 http://imysql.com http://mysqlsupport.cn 22