- 1、本文档共10页,可阅读全部内容。
- 2、原创力文档(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
查看更多
MySQL中高并发热点更新性能优化希羽大纲典型的业务场景及问题.ppt
MySQL中高并发热点更新性能优化
希羽
大纲
典型的业务场景及问题
MySQL层的现象
问题的本质原因
曾经的尝试方法
问题的难点
瞬间热点更新检测模型
瞬间热点更新线程调度
优化效果
典型的业务场景及问题
MySQL的性能瞬间急剧下降,TPS 1W -- 200
MySQL层的现象
绝大部分线程在更新商品库存量
update t set 库存量 -1 where ...
正常的查询和更新的RT也剧增
祈求业务降级以让DB抗过去
问题的本质原因
InnoDB层行锁机制
每行更新请求都会创建一个记录锁对象
成功加锁则执行,失败则被挂起
相同的记录锁被HASH到同一桶中
InnoDB层并发控制
被挂起的线程释放并发槽位,唤醒外层FIFO中对头线程
FIFO队头被调度进入InnoDB层,但相同因锁等待而被挂起,同上
瞬间线程都在InnoDB内部被挂起,而外层的FIFIO队列为空
并发控制并不严格
问题
加锁、解锁中众多O(n),O(n^2)的逻辑
n为相同桶中行锁对象的个数
曾经的尝试方法
2011年 禁掉死锁检测
死锁检测开销巨大,占~80% CPU 资源
facebook任然保留这样的做法
2011年开启挺过双11
2012年 严格并发控制
严格控制InnoDB层并发数
挺过双12
双12晚高峰的小插曲
2013年 600亿?
问题的难点
热点记录的识别与控制
业务层
识别宝贝id进行排队和流控
集群环境下,多app可能全部到一台DB上
存储层实现则较通用,但有难度
类似KV的存储容易,key或row_id
MySQL的SQL中识别非常困难
瞬间热点更新检测模型
瞬间热点
热点可能只是某一瞬间,不可持续
对记录访问进行监控?
思路:转变为对锁争用!
如果同一行记录的加锁有较多线程等待,则此条记录为瞬间热点记录
瞬间热点更新线程调度
减少锁对象
如果线程访问的行锁已经有t个线程在等待,则当前线程不创建任何锁对象
尽可能的保持InnoDB层一个桶上的行锁数量
线程调度出InnoDB层
根据请求锁的space/page_no/heap_no被影射到外层的HASH中
同一桶中线程串行,不同桶中线程则并行
同一桶中轮询重试加锁
重试超时强制进入,避免调度上的死锁
加锁逻辑图
优化效果
Default: 50
Deadlock Disabled: 250
Hot Rows Control: 10500
测试
QA
您可能关注的文档
- 2013年中期业绩路演材料.PDF
- 2017Q2一、二线大型城市拥堵缓解拐点三四线城市拥堵持续加重.PDF
- 上海市就业促进中心.PDF
- 2017年海南历代文化名人丛书项目绩效评价报告.doc-海南省政协.doc
- 2017物理与电子工程学院招收硕士研究生复试工作安排.doc
- 2018Q1全国361城市中有65城市通勤高峰受拥堵威胁.PDF
- 与RADIUS服务器ACS5.2和WLC配置示例的动态VLAN分配.PDF
- 2018年Q1交通出行报告-世纪高通.PDF
- 东海大学资讯工程系研究所.PDF
- 2019年第一批河东区土地储备项目基本情况.PDF
- 森林群落发育及演替.ppt
- 2025届江苏省苏州市工业园区中考一模数学卷(含解析).pdf
- 高中历史选择题考试技术(四)考试技巧之逻辑判断 用“全面”的观点 高考历史做题方法指导.pptx
- 10,2酸和碱的中和反应课件--九年级化学人教版下册.pptx
- 2025届江苏省泰州市兴化市中考一模数学试卷(附解析).docx
- 2025届江苏省扬州市中考一模数学试卷.docx
- 2025届江苏省泰州市靖江市中考一模数学试卷(附解析).docx
- 9.3 力与运动的关系 -八年级物理下册课件(苏科版).pptx
- 2025届江苏省中考数学一模试卷(附解析).docx
- 2025年江苏省常熟市中考第一次适应性考试数学试卷(附解析).docx
最近下载
- 丧葬礼仪《丧帖诸称呼总目列论.docx
- 中南标准11ZJ901室外装修及配件.pdf
- 湖南省“一起考”大联考2024-2025学年高三下学期第一次模拟考试 物理试卷(含解析).docx VIP
- 药师考试《历年真题》测试试卷(附答案).pdf VIP
- pH值分析原始记录表.doc
- 主题班会:上课睡觉的危害.ppt VIP
- 2023年四川省南充市中考数学真题含参考答案及评分标准.pdf
- DB34_T5069-2017:屈曲约束支撑结构技术规程.pdf VIP
- 赣州市章贡区传统武术的发展现状调查与分析.docx VIP
- 2025年落实“大学习、 大培训、 大考试”培训题库(含答案) .pdf VIP
文档评论(0)