未分類
23 9 月 2020

求助帖: 上线之后数据库 CPU 升高,找不到原因

求助帖: 上线之后数据库 CPU 升高,找不到原因

資深大佬 : chanlk 0

数据库使用的是 aws 的 rds;

上线后从它的监控面板看到 cpu 使用率大概增加了一倍 做了些工作,但是还是找不到原因

说一下自己已经做过的工作:

  1. 排查了慢查询,正常,和上线前差不多
  2. 数据库的连接数方差变大(变大 20-30%),其他监控曲线波动不大(如 IOPS,网络的 I/O,内存和队列等)
  3. 检查了业务的服务器监控,曲线也是稳定的
  4. 用 show processlist 看了下没有什么毛病

有大佬能提供一下排查思路吗?感激不尽

大佬有話說 (5)

  • 資深大佬 : pmispig

    top 查看 mysql 哪个线程 CPU 使用率高，然后 select * from performance_schema.threads where THREAD_OS_ID=xxx;

  • 資深大佬 : yumenawei

    更改了 SQL 语句吗？
    可能是由于某些计算量大的聚合操作导致的，比如说 max min

  • 資深大佬 : pmispig

    如果是 rds 的话可能只能用点巧劲儿，把所有的 SQL 日志都打出来，分析下，(执行频率高 and 执行时间很长 )做一个并集，就是这个 SQL，再去找属于哪个应用和业务

  • 主 資深大佬 : chanlk

    @yumenawei 更改了 sql,但是这些 sql 是低频的,是客服系统用的
    @pmispig 没有太高的数据库权限,我把你的思路提供给了运维小哥,我这边看下从业务接口耗时的层面上不知道能不能找到是哪些接口导致的

    谢谢~

  • 資深大佬 : tieqishan07li

    直接提工单让 AWS 查一下，他们肯定有排查思路